数据开发工程师
1.2-1.7万元/月
更新 2025-12-25 06:48:08
浏览 282
职位详情
数据开发
3-5年
Java · 要求数据开发经验 · 数据建模经验 · Kafka · MySQL/SQL Server · 实时数仓开发经验 · 数据平台开发经验 · Flink · 金融行业经验 · Hive · 外包类 · Spark · 数据仓库开发经验 · P
此岗位为外派驻场岗位,请留意。
岗位职责
•承担离线数仓ODS/DWD/DWS/ADS各层级ETL任务的开发与优化
•完成不少于200个数据加工任务的开发工作(含存量迭代与新增任务)
•负责实时数仓相关任务开发,落地不少于50个实时处理任务
•协同推进数据治理,持续维护元数据信息及数据质量校验规则
•参与数据湖语料标注、知识图谱搭建等AI底层支撑工作
任职要求
学历与经验:
1、本科及以上学历,计算机类相关专业
2、具备3-5年金融领域实时数据开发经验,其中证券行业从业时间不低于2年
3、具有独立承担100+调度任务开发与运维的实际经验
技术能力(必备):
1、SQL能力:精通复杂HiveSQL编写(涵盖窗口函数、CTE、多表关联),具备执行计划解读与调优能力
2、ETL开发:掌握全量与增量同步机制,熟悉SCD类型维度表处理方案
3、调度工具:熟练运用Azkaban/Airflow/XXL-JOB/海豚调度中至少一种平台
4、实时开发:熟练使用FlinkSQL或DataStreamAPI,具备Kafka数据消费与实时指标计算实战经验
5、数据质量:能够制定数据校验逻辑,独立编写数据稽核脚本
业务能力要求:
•熟悉证券交易数据模型及其内在关联关系
•掌握客户资产数据的统计与计算方法
•了解行情数据的接入与处理流程
•能识别普通账户与信用账户在数据层面的区别
岗位职责
•承担离线数仓ODS/DWD/DWS/ADS各层级ETL任务的开发与优化
•完成不少于200个数据加工任务的开发工作(含存量迭代与新增任务)
•负责实时数仓相关任务开发,落地不少于50个实时处理任务
•协同推进数据治理,持续维护元数据信息及数据质量校验规则
•参与数据湖语料标注、知识图谱搭建等AI底层支撑工作
任职要求
学历与经验:
1、本科及以上学历,计算机类相关专业
2、具备3-5年金融领域实时数据开发经验,其中证券行业从业时间不低于2年
3、具有独立承担100+调度任务开发与运维的实际经验
技术能力(必备):
1、SQL能力:精通复杂HiveSQL编写(涵盖窗口函数、CTE、多表关联),具备执行计划解读与调优能力
2、ETL开发:掌握全量与增量同步机制,熟悉SCD类型维度表处理方案
3、调度工具:熟练运用Azkaban/Airflow/XXL-JOB/海豚调度中至少一种平台
4、实时开发:熟练使用FlinkSQL或DataStreamAPI,具备Kafka数据消费与实时指标计算实战经验
5、数据质量:能够制定数据校验逻辑,独立编写数据稽核脚本
业务能力要求:
•熟悉证券交易数据模型及其内在关联关系
•掌握客户资产数据的统计与计算方法
•了解行情数据的接入与处理流程
•能识别普通账户与信用账户在数据层面的区别
相似职位
很抱歉,暂无相似职位!