第80章 降噪(10 / 11)
任务描述:主办方將提供某市场脱敏后的过去五年分钟级行情切片样本(包含大量脏数据)。
参赛者需利用算法,精准识別出其中的异常波动数据段、因交易所接口问题导致的缺失模式、以及疑似復权口径不一致的底层栏位,並提交清洗后的数据集及方法说明报告。
评分標准由异常標籤识別准確率,清洗后栏位一致性,保留样本比例,以及人工报告评审共同决定。
另设隱藏测试集,检测清洗后数据在基准因子復现实验中的稳定性变化。
接著,是数据字典的具体说明。
时间戳。
脱敏標的代码。
开盘价。
最高价。
最低价。
收盘价。
成交量。
成交额。
停牌標记位。
復权標记位。
训练窗口期与测试窗口期划分。
江临看著屏幕上这一行行代表著资本市场跳动脉搏的词汇,看著那些所谓的开盘,收盘,成交量。
突然之间,他的心底涌起一种强烈而荒谬的熟悉感。
这种熟悉感,与金融、財富、甚至华尔街的精英敘事毫无关係。
这是他对那些在极寒风暴中罢工的温度传感器的熟悉。
是对因为宇宙射线干扰而发生零点漂移的辐射计的熟悉。
是对相机在绝对暗场下,因为热电子跃迁而產生的泊松噪声的熟悉。
是对光学支架,在昼夜温差交替中缓慢发生热胀冷缩的形变,导致第二天早上所有干涉读数全部向一侧偏置的熟悉。
很多人说,数据不会说谎。
江临在废土上用血的教训证明,这句话大错特错。
数据经常说谎。
它不仅说谎,它还会偽装成真理的样子诱导你走向毁灭。
更准確的物理学表达应该是,数据会绝对诚实地记录下一个复杂系统运转时的全部问题,包括系统本身的规律,包括测量仪器的缺陷,包括环境的干扰,包括传输通道的损耗。
只是人类常常误以为数据只记录了他们脑子里想要的那一部分理想状態。
在这份脱敏的金融时间序列里,那些所谓的异常波动,数据缺失,口径不一致,在江临眼里,不过就是量价探测器在这个名为市场的复杂系统里,所產生的底噪、探头漂移和传输丟包罢了。 ↑返回顶部↑
参赛者需利用算法,精准识別出其中的异常波动数据段、因交易所接口问题导致的缺失模式、以及疑似復权口径不一致的底层栏位,並提交清洗后的数据集及方法说明报告。
评分標准由异常標籤识別准確率,清洗后栏位一致性,保留样本比例,以及人工报告评审共同决定。
另设隱藏测试集,检测清洗后数据在基准因子復现实验中的稳定性变化。
接著,是数据字典的具体说明。
时间戳。
脱敏標的代码。
开盘价。
最高价。
最低价。
收盘价。
成交量。
成交额。
停牌標记位。
復权標记位。
训练窗口期与测试窗口期划分。
江临看著屏幕上这一行行代表著资本市场跳动脉搏的词汇,看著那些所谓的开盘,收盘,成交量。
突然之间,他的心底涌起一种强烈而荒谬的熟悉感。
这种熟悉感,与金融、財富、甚至华尔街的精英敘事毫无关係。
这是他对那些在极寒风暴中罢工的温度传感器的熟悉。
是对因为宇宙射线干扰而发生零点漂移的辐射计的熟悉。
是对相机在绝对暗场下,因为热电子跃迁而產生的泊松噪声的熟悉。
是对光学支架,在昼夜温差交替中缓慢发生热胀冷缩的形变,导致第二天早上所有干涉读数全部向一侧偏置的熟悉。
很多人说,数据不会说谎。
江临在废土上用血的教训证明,这句话大错特错。
数据经常说谎。
它不仅说谎,它还会偽装成真理的样子诱导你走向毁灭。
更准確的物理学表达应该是,数据会绝对诚实地记录下一个复杂系统运转时的全部问题,包括系统本身的规律,包括测量仪器的缺陷,包括环境的干扰,包括传输通道的损耗。
只是人类常常误以为数据只记录了他们脑子里想要的那一部分理想状態。
在这份脱敏的金融时间序列里,那些所谓的异常波动,数据缺失,口径不一致,在江临眼里,不过就是量价探测器在这个名为市场的复杂系统里,所產生的底噪、探头漂移和传输丟包罢了。 ↑返回顶部↑