2. 另类数据基础

在量化投研中,传统数据通常指财报、行情、宏观统计等结构化、低频、标准化程度高的信息。而另类数据(Alternative Data)是指这些传统来源之外、能够为投资决策提供增量信息的数据集合。它的核心价值不在于“新”,而在于更早、更细、更接近真实经济活动。例如,卫星图像可以在财报发布前数月观察到停车场车流变化,信用卡交易数据可以高频追踪消费趋势,社交媒体情绪可以捕捉市场预期的边际变化。

另类数据的本质是:用非传统采集手段,获取传统数据尚未覆盖或尚未发布的经济活动痕迹,并将其转化为可量化、可回测、可交易的信号。

一、核心原理:为什么另类数据能产生Alpha

另类数据的Alpha来源可以归纳为三个维度:信息差、时间差、颗粒度差。信息差指市场尚未普遍关注或难以获取的数据源;时间差指数据发布频率高于财报或宏观数据,能提前反映趋势;颗粒度差指数据可以细化到门店、SKU、区域、个体级别,而传统数据往往只到行业或公司汇总层面。

但另类数据并非天然有效。它需要经过采集、清洗、对齐、建模、回测等环节,才能转化为稳定信号。尤其要注意Point-in-Time(PIT)对齐问题:如果使用了未来才发布的数据版本,就会造成前视偏差(Look-ahead Bias),导致回测虚高。这是本课程后续章节的重点,但本章先建立对数据本身的基础认知。

二、常见另类数据类型与特征

另类数据种类繁多,按采集方式和业务场景可分为以下几类:

类型 典型来源 更新频率 主要应用场景 主要风险
卫星图像 Planet、Maxar、Sentinel 日/周 零售客流、原油库存、农业产量、建筑施工 云层遮挡、图像解析误差、成本高
信用卡交易 银行、支付网络、聚合平台 日/周 消费趋势、公司营收预测、行业景气度 样本偏差、隐私合规、覆盖不全
社交媒体 Twitter/X、Reddit、微博、论坛 实时/分钟 情绪指标、舆情监控、产品口碑 水军噪声、平台政策变化、非结构化
地理位置 手机定位、App SDK、车载GPS 日/小时 门店客流、物流追踪、区域经济 隐私监管、样本代表性、设备偏差
供应链 海关提单、航运AIS、采购订单 周/月 进出口趋势、库存周期、供应商风险 滞后发布、报关口径差异、覆盖有限

除了上述五类,还有应用商店排名、网页抓取价格、招聘广告、专利数据、天气数据等。不同数据类型的共同点是:原始形态往往是非结构化或半结构化的,需要经过ETL和特征工程才能使用。

另类数据商业生态与数据流 数据源 卫星/信用卡/社交/定位 原始采集 爬虫/API/合作/采购 数据供应商 清洗/标准化/打包 聚合平台 多源融合/API分发 对冲基金/资管 信号挖掘/组合构建 量化研究平台 回测/因子/风控 Point-in-Time 对齐与防泄漏层 数据版本控制 · 发布时间戳 · 修订记录 · 回测隔离 关键风险点 前视偏差 · 样本偏差 · 数据修订 · 供应商锁定 · 合规隐私 必须在数据进入模型前完成时间戳对齐与版本隔离

三、数据获取方式与商业生态

另类数据的获取方式主要有四种:直接采购、API订阅、网页抓取、合作交换。直接采购通常指向专业数据供应商购买历史数据和持续更新服务,成本高但质量相对可控;API订阅适合实时或高频数据,按调用量或订阅周期计费;网页抓取成本低但面临反爬、法律合规和稳定性问题;合作交换则常见于与平台、银行、物流公司等建立数据共享机制。

商业生态方面,产业链大致分为上游数据源、中游数据供应商和聚合平台、下游买方机构。上游掌握原始数据,中游负责清洗、标准化、合规审查和产品化,下游将数据转化为因子或信号。近年来,数据聚合平台(如Alternativedata.org、Eagle Alpha等)扮演了撮合与评估角色,帮助买方快速筛选供应商。

对于初学者,建议先从公开或低成本数据源入手,例如:Yahoo Finance API、FRED、Quandl、Kaggle数据集、GitHub上的开源爬虫项目。重点不是数据量,而是理解从原始数据到可用信号的完整链路。

四、案例与场景:卫星图像预测零售客流

假设我们要用卫星图像预测某零售公司季度营收。流程如下:

  1. 数据采集:获取目标公司主要门店的卫星图像,频率为每周一次,覆盖过去8个季度。
  2. 图像处理:使用CNN或目标检测模型识别停车场车辆数量,转化为客流指数。
  3. PIT对齐:每张图像必须记录拍摄时间戳,并确保回测时只使用当时已获取的图像,而非后来补采的版本。
  4. 信号构建:将客流指数与历史营收做回归,生成预测因子。
  5. 回测验证:在严格时间隔离下检验因子IC、IR和换手率。

这个案例中,最大的陷阱是数据修订:供应商可能后来重新处理了历史图像,导致同一日期对应多个版本。如果不做PIT对齐,回测就会使用“未来修正过”的数据,产生虚高收益。

常见误区:把“数据获取时间”等同于“数据发布时间”。很多另类数据存在滞后发布、补发、修订等情况。必须记录事件时间、采集时间、发布时间、修订时间四个时间戳,才能做真正的PIT对齐。

五、复盘:另类数据落地的关键检查清单

  • 数据覆盖度:样本是否代表整体?是否存在幸存者偏差?
  • 时间戳完整性:是否记录了采集、发布、修订时间?
  • 合规性:数据来源是否合法?是否涉及个人隐私?
  • 成本收益:数据费用、处理成本是否低于预期Alpha?
  • 可解释性:信号是否有经济逻辑支撑,还是纯数据挖掘?
  • 防泄漏:回测中是否严格隔离未来信息?

另类数据不是“越多越好”,而是“越对齐越可靠”。只有在理解数据来源、获取方式、商业生态和时间属性的基础上,才能进入后续的PIT对齐与防泄漏实战。本章建立的基础认知,将直接决定你能否在回测中避开前视偏差的陷阱。