高级大数据开发工程师
1.8-3.5万元/月
更新 2025-12-18 14:20:05
浏览 780
职位详情
数据开发
5-10年
Java · Hive · 要求数据开发经验 · Scala · Kafka · 非外包类 · 计算机相关专业 · Spark · 数据平台开发经验 · Flink · Python · HBase
主要岗位职责:
一、协同产品规划,优化数据产品功能、服务及业务流程;
二、承担数据仓库的规划、设计、开发任务,完成各业务线数据的采集、清洗、整合、调度与性能优化;
三、参与企业内部数据治理工作,涵盖元数据管理、数据质量监控、数据权限控制以及数据开发规范的制定;
四、主导内部数据应用系统与工具的设计、开发与日常维护;
五、处理大数据集群及线上数据服务中的各类问题,确保系统安全、稳定、高效运行;
六、跟踪大数据领域前沿技术,规划大数据平台类产品的整体架构,推动大数据能力的服务化输出,支撑相关数据产品的研发与落地。
任职资格要求:
一、专业要求:计算机、通信、信息系统、数学等相关专业背景。
二、专业技能
1.掌握Java、Scala、Python中的一种或多种编程语言;
2.熟悉Hadoop生态体系下的工程化开发,精通Hadoop、Spark、Hive、HBase、Flink、Kafka、ElasticSearch等主流大数据技术,具备Java与Scala项目开发经历,熟悉Python者优先考虑;
3.对大规模数据场景下的数仓建设(包括离线与实时数仓)在架构设计、模型构建、数据服务和治理等方面有清晰认知,拥有大型数据仓库实施或数据中台开发实战经验;
4.熟练运用Mysql、Redis、Hive、Hbase等数据库的调优技术;
5.具备较强的学习能力、沟通协调能力及团队协作意识。
加分项:
1、具备PB级别数据治理实践经验;
2、有个性化推荐引擎设计与开发经历,熟悉sparkmllib工具链;
三、工作经验
8年以上相关领域工作经验,统招全日制本科及以上学历。
一、协同产品规划,优化数据产品功能、服务及业务流程;
二、承担数据仓库的规划、设计、开发任务,完成各业务线数据的采集、清洗、整合、调度与性能优化;
三、参与企业内部数据治理工作,涵盖元数据管理、数据质量监控、数据权限控制以及数据开发规范的制定;
四、主导内部数据应用系统与工具的设计、开发与日常维护;
五、处理大数据集群及线上数据服务中的各类问题,确保系统安全、稳定、高效运行;
六、跟踪大数据领域前沿技术,规划大数据平台类产品的整体架构,推动大数据能力的服务化输出,支撑相关数据产品的研发与落地。
任职资格要求:
一、专业要求:计算机、通信、信息系统、数学等相关专业背景。
二、专业技能
1.掌握Java、Scala、Python中的一种或多种编程语言;
2.熟悉Hadoop生态体系下的工程化开发,精通Hadoop、Spark、Hive、HBase、Flink、Kafka、ElasticSearch等主流大数据技术,具备Java与Scala项目开发经历,熟悉Python者优先考虑;
3.对大规模数据场景下的数仓建设(包括离线与实时数仓)在架构设计、模型构建、数据服务和治理等方面有清晰认知,拥有大型数据仓库实施或数据中台开发实战经验;
4.熟练运用Mysql、Redis、Hive、Hbase等数据库的调优技术;
5.具备较强的学习能力、沟通协调能力及团队协作意识。
加分项:
1、具备PB级别数据治理实践经验;
2、有个性化推荐引擎设计与开发经历,熟悉sparkmllib工具链;
三、工作经验
8年以上相关领域工作经验,统招全日制本科及以上学历。
相似职位
很抱歉,暂无相似职位!