高级大数据开发工程师
1.8-3.5万元/月
更新 2025-12-22 14:38:47
浏览 600
职位详情
数据开发
5-10年
Java · Hive · 要求数据开发经验 · Scala · Kafka · 非外包类 · 计算机相关专业 · Spark · 数据平台开发经验 · Flink · Python · HBase
主要岗位职责:
一、协助产品规划,优化数据产品的功能、服务及业务流程;
二、负责数据仓库的架构设计、开发实施,以及各业务线数据的采集、清洗、整合、调度与性能调优;
三、参与企业内部数据治理体系搭建,涵盖元数据管理、数据质量管控、权限控制及数据开发标准制定;
四、承担内部数据应用系统与工具的设计、开发与日常维护工作;
五、及时处理大数据集群和线上数据服务中的各类问题,确保系统安全、稳定、高效运行;
六、跟踪大数据领域前沿技术,主导大数据平台类产品的架构规划,推动能力服务化输出及数据产品的研发落地。
任职资格要求:
一、专业要求:计算机、通信、信息系统、数学等相关专业背景。
二、专业技能
1.掌握Java、Scala、Python中至少一种编程语言;
2.熟悉Hadoop生态体系的技术开发,熟练运用Hadoop、Spark、Hive、HBase、Flink、Kafka、ElasticSearch等主流大数据组件,具备Java或Scala项目实战经验,了解Python者优先考虑;
3.对大规模数据场景下的数仓建设(含离线与实时架构)在模型设计、服务构建、治理机制等方面有深入理解,拥有大型数仓或数据中台项目实施经验;
4.熟练掌握Mysql、Redis、Hive、Hbase等数据库的性能优化方法;
5.具备较强的学习能力、沟通协调能力及团队协作意识。
加分项:
1、具备PB级别数据处理与治理实践经验;
2、有个性化推荐系统开发经历,熟悉sparkmllib相关技术栈;
三、工作经验
需8年以上相关领域工作经验,统招全日制本科及以上学历。
一、协助产品规划,优化数据产品的功能、服务及业务流程;
二、负责数据仓库的架构设计、开发实施,以及各业务线数据的采集、清洗、整合、调度与性能调优;
三、参与企业内部数据治理体系搭建,涵盖元数据管理、数据质量管控、权限控制及数据开发标准制定;
四、承担内部数据应用系统与工具的设计、开发与日常维护工作;
五、及时处理大数据集群和线上数据服务中的各类问题,确保系统安全、稳定、高效运行;
六、跟踪大数据领域前沿技术,主导大数据平台类产品的架构规划,推动能力服务化输出及数据产品的研发落地。
任职资格要求:
一、专业要求:计算机、通信、信息系统、数学等相关专业背景。
二、专业技能
1.掌握Java、Scala、Python中至少一种编程语言;
2.熟悉Hadoop生态体系的技术开发,熟练运用Hadoop、Spark、Hive、HBase、Flink、Kafka、ElasticSearch等主流大数据组件,具备Java或Scala项目实战经验,了解Python者优先考虑;
3.对大规模数据场景下的数仓建设(含离线与实时架构)在模型设计、服务构建、治理机制等方面有深入理解,拥有大型数仓或数据中台项目实施经验;
4.熟练掌握Mysql、Redis、Hive、Hbase等数据库的性能优化方法;
5.具备较强的学习能力、沟通协调能力及团队协作意识。
加分项:
1、具备PB级别数据处理与治理实践经验;
2、有个性化推荐系统开发经历,熟悉sparkmllib相关技术栈;
三、工作经验
需8年以上相关领域工作经验,统招全日制本科及以上学历。
相似职位
很抱歉,暂无相似职位!