金融数据技术

行情数据从产生到变成 Agent 能调用的工具,中间每一步怎么做对。

适合做数据、写工具,或想看懂金融数据产品的人。已开放 24 讲,规划 24 讲,内容持续更新中。

  1. 01

    行情数据从哪来

    逐笔与快照、K 线聚合、表格处理、时间对齐和复权。

    已开放 5/5 · 0/5 已完成
    1. 第 1 讲Tick:逐笔与快照行情开始学习
    2. 第 2 讲K 线聚合:从 Tick 到 OHLCV开始学习
    3. 第 3 讲DataFrame:表格化处理开始学习
    4. 第 4 讲时间序列对齐与时区、交易日历开始学习
    5. 第 5 讲复权与公司行为开始学习
  2. 02

    存储与查询

    文件格式、分区和数据库选型,决定数据查得快不快、省不省钱。

    已开放 4/4 · 0/4 已完成
    1. 第 6 讲CSV 与 Parquet:列式存储开始学习
    2. 第 7 讲分区与数据湖开始学习
    3. 第 8 讲数据库选型:时序库与 OLAP开始学习
    4. 第 20 讲表格式与数据版本:Iceberg 的快照与时间旅行开始学习
  3. 03

    实时、批处理与调度

    行情怎么实时分发、批量计算,任务失败了怎么重跑、怎么补历史。

    已开放 5/5 · 0/5 已完成
    1. 第 9 讲消息队列 Kafka:实时行情分发开始学习
    2. 第 10 讲流处理:Flink 与 Spark Streaming开始学习
    3. 第 11 讲Spark 批处理开始学习
    4. 第 17 讲调度与编排:依赖与重跑开始学习
    5. 第 18 讲增量更新与历史回补开始学习
  4. 04

    质量、来源与时点

    缺失和异常怎么查,数据从哪来,什么时候才算“已知”。

    已开放 3/3 · 0/3 已完成
    1. 第 12 讲数据质量与校验:缺失、异常、口径开始学习
    2. 第 13 讲数据血缘与来源开始学习
    3. 第 19 讲Point-in-time 数据与前视偏差开始学习
  5. 05

    对外服务:API、MCP 与文本检索

    缓存、限流、接口设计,把数据接口变成 Agent 能调用的工具,再把公告和新闻做成可检索、可追溯的文本数据。

    已开放 4/4 · 0/4 已完成
    1. 第 14 讲缓存与限流开始学习
    2. 第 15 讲API 设计:分页、错误合同、单位开始学习
    3. 第 16 讲MCP:把数据接口变成 Agent 工具开始学习
    4. 第 23 讲金融文本数据与检索:公告、新闻与 RAG开始学习
  6. 06

    运维、权限与成本

    数据服务上线以后:怎样监控新鲜度和故障,怎样按用户授权,以及每一份数据花了多少钱。

    已开放 3/3 · 0/3 已完成
    1. 第 21 讲可观测性与 SLA:指标、日志、告警与数据新鲜度开始学习
    2. 第 22 讲鉴权与多租户:API Key、权限范围与数据授权合规开始学习
    3. 第 24 讲数据成本核算:存储、计算、上游费用与定价开始学习