大数据开发工程师
1.5-2.5万元/月
更新 2025-12-24 14:22:53
浏览 101
职位详情
数据开发
3-5年
外包类
要求数据开发经验
数据治理经验
数据平台开发经验 · 数据仓库开发经验
Java · Scala
Hive
Hive原理/源码
MySQL原理/源码
岗位职责及目标:
1.负责大数据平台的开发工作,根据业务需求,进行数据仓库的设计与构建,确保数据准确性与数据质量;
2.深入理解业务,通过高效的数据处理手段,为决策提供数据支持,推动业务发展;
3.负责数据集成、数据清洗、数据建模、画像标签等数据资产的建设工作,优化数据处理流程,提升数据处理效率;
任职要求:
1.本科及以上学历,计算机等相关专业;
2.具备3年以上数据开发相关领域工作经验,有大型数据仓库建设及优化经验者优先;
3.熟悉Postgresql、MySQL,Doris等主流数据库,熟练掌握SQL语法,并能对性能进行优化,有Doris经验优先;
4.熟练掌握Scala,Java中的一种开发语言,熟练应用hive常用功能,如行列转换,爆炸函数,开窗函数等;
5.熟悉hadoop/MPP大数据生态相关技术及原理,能熟练运用Hadoop,hive,Spark,Flink,Kafka,Datax,Dolphinscheduler等组件工具,并能够处理开发和生产中的问题,有大数据实时数仓建设,调度和运维调优经验优先;
6.具备良好的沟通能力,能够与团队及业务部门有效沟通,确保需求准确理解和高效实施。
7.有大型实时数据仓库项目经验、有数仓设计和数据治理经验优先
1.负责大数据平台的开发工作,根据业务需求,进行数据仓库的设计与构建,确保数据准确性与数据质量;
2.深入理解业务,通过高效的数据处理手段,为决策提供数据支持,推动业务发展;
3.负责数据集成、数据清洗、数据建模、画像标签等数据资产的建设工作,优化数据处理流程,提升数据处理效率;
任职要求:
1.本科及以上学历,计算机等相关专业;
2.具备3年以上数据开发相关领域工作经验,有大型数据仓库建设及优化经验者优先;
3.熟悉Postgresql、MySQL,Doris等主流数据库,熟练掌握SQL语法,并能对性能进行优化,有Doris经验优先;
4.熟练掌握Scala,Java中的一种开发语言,熟练应用hive常用功能,如行列转换,爆炸函数,开窗函数等;
5.熟悉hadoop/MPP大数据生态相关技术及原理,能熟练运用Hadoop,hive,Spark,Flink,Kafka,Datax,Dolphinscheduler等组件工具,并能够处理开发和生产中的问题,有大数据实时数仓建设,调度和运维调优经验优先;
6.具备良好的沟通能力,能够与团队及业务部门有效沟通,确保需求准确理解和高效实施。
7.有大型实时数据仓库项目经验、有数仓设计和数据治理经验优先
相似职位
很抱歉,暂无相似职位!