数据工程师

【岗位职责】

• 数据管道与调度：搭建并维护稳定的数据摄入、清洗、调度 pipeline，保障行情、财报、另类数据等核心数据源的一致性与时效性，保障数据可回测性；建设标准化的数据接口与数据集版本管理，支撑算法团队的训练与回测；

• 另类数据基建：维护数据采集系统，处理反爬、数据格式统一、增量更新与质量控制；

• 存储与数据库：负责数据库选型、建模与性能优化，管理对象存储与冷热数据分层；

• 研发基建：搭建 CI/CD 与容器化部署，管理开发、回测、生产环境的隔离与资源分配；

• 稳定性与可观测性：建立数据质量监控、任务失败告警、数据血缘追踪与日志体系，让数据问题在影响模型和策略之前被发现，并支撑问题根因定位。

【任职要求】

• 本科及以上学历，计算机、软件工程等相关专业优先；

• 具备独立闭环能力：明确目标后自主完成技术方案设计、开发、测试与上线；

• 有数据管道、数据采集或调度系统的实际搭建经验；熟练使用 Python，熟悉 Linux / Docker 及常见调度工具（Airflow / Dagster 等）；

• 熟悉关系型数据库并具备 SQL 调优能力，接触过至少一种分析型或时序数据库（如 ClickHouse、Doris）；

• 具备技术调研与选型能力：面对不熟悉的技术领域，能独立完成调研分析、方案设计与落地验证，并在较短时间内形成可交付产出。

【加分项】

• 金融行情数据或财报数据的处理经验；

• 处理过非结构化文本数据（新闻、公告、研报）的采集与清洗；

• 参与过预测、推荐或量化数据系统的建设。