阶段4数据清洗实战●●●●●

缺失因子值怎么处理?

我的掌握程度:
q-351速览 · 附阶段实战指南

先掌握这个答案

填横截面中位数(中性)、或保留NaN让模型自动跳过。不要填0(0往往有含义)。

先读结论,再核对下方使用边界;数字例题为教学情景,涉及实际行情与规则时请核对原始来源。

从理解到使用

填充前先解释为什么缺失

停牌、未披露、窗口不足、接口失败应分别标记。沿用上一值不等于当日可交易;bfill可能把未来信息带回过去。中位数填充也会改变分布,需在训练范围内估计并做敏感性比较。

本阶段实战方法 · 一条能复现的数据流水线

把接口返回的数据变成可用于因子研究的面板时,先处理时点、主键与单位。

  1. 建立数据字典:字段、单位、时区、交易日历、数据源、抓取时间、原始价与复权因子。
  2. 用(date, code)查重,区分停牌、未上市、窗口不足和真实缺失;不要用向后填充把未来值带回过去。
  3. 保存原始快照与清洗日志,固定随机种子和环境版本;接口字段变化时先核对官方文档。

使用边界

  • 报告期不等于公告可用日,盘后公告通常不能用于当天收盘前决策。
  • API输出名为“动态市盈率”时不能直接改名TTM;浏览器练习不支持任意原生库或行情抓取接口。
核心答案(速览)
填横截面中位数(中性)、或保留NaN让模型自动跳过。不要填0(0往往有含义)。

🤖 AI导师

导师会先检查你的前置知识(起点概念),再用案例、公式和代码帮助理解。此功能需要先启用服务。