数据开发工程师
1.1-1.8万元/月
更新 2025-12-16 14:33:52
浏览 233
职位详情
数据开发
3-5年
Shell · 要求数据开发经验 · ETL开发经验 · Kafka · MySQL/SQL Server · BI报表开发经验 · 非外包类 · Spark · 数据平台开发经验 · Oracle · Python · SQL
【岗位职责】
1、承担公司数据仓库与数据平台的架构设计、开发及日常维护工作。
2、负责离线和实时数据的采集、清洗、转换与加载(ETL)流程开发及任务调度管理。
3、运用Flink/Spark/Hadoop等大数据组件处理流式与批量数据任务。
4、编写高效可靠的SQL与数据处理逻辑,持续提升查询效率与系统资源使用率。
5、协同数据分析、算法及业务团队,输出稳定可用的数据服务与接口支持。
6、参与数据体系架构规划、性能优化与技术方案评估,助力数据中台体系建设。
【任职要求】
1、本科及以上学历,计算机、软件工程、数学、统计等相关专业背景。
2、具备扎实的SQL能力,能编写复杂查询并进行执行计划调优。
3、熟悉主流数据库系统(MySQL、PostgreSQL、ClickHouse、Hive等)。
4、掌握Flink流计算框架,了解流批一体、窗口机制与状态管理原理。
5、熟练使用至少一种编程语言(Java/Scala/Python)。
6、熟悉大数据技术栈(Hadoop、Kafka、HBase、Spark、Iceberg等)及数仓建模方法论。
7、具有良好的数据敏感度、编码规范与文档撰写习惯,具备优秀的沟通协调与问题解决能力。
1、承担公司数据仓库与数据平台的架构设计、开发及日常维护工作。
2、负责离线和实时数据的采集、清洗、转换与加载(ETL)流程开发及任务调度管理。
3、运用Flink/Spark/Hadoop等大数据组件处理流式与批量数据任务。
4、编写高效可靠的SQL与数据处理逻辑,持续提升查询效率与系统资源使用率。
5、协同数据分析、算法及业务团队,输出稳定可用的数据服务与接口支持。
6、参与数据体系架构规划、性能优化与技术方案评估,助力数据中台体系建设。
【任职要求】
1、本科及以上学历,计算机、软件工程、数学、统计等相关专业背景。
2、具备扎实的SQL能力,能编写复杂查询并进行执行计划调优。
3、熟悉主流数据库系统(MySQL、PostgreSQL、ClickHouse、Hive等)。
4、掌握Flink流计算框架,了解流批一体、窗口机制与状态管理原理。
5、熟练使用至少一种编程语言(Java/Scala/Python)。
6、熟悉大数据技术栈(Hadoop、Kafka、HBase、Spark、Iceberg等)及数仓建模方法论。
7、具有良好的数据敏感度、编码规范与文档撰写习惯,具备优秀的沟通协调与问题解决能力。
相似职位
很抱歉,暂无相似职位!