高级Java开发(数据中台方向)
1.5-1.7万元/月
更新 2026-01-09 17:50:47
浏览 711
职位详情
Java
5-10年
Java · 大数据经验 · 不接受居家办公 · Docker · PostgreSQL · MySQL · Spark · 架构设计经验 · Spring
岗位职责:
1.核心平台开发:承担基于ApacheDoris的实时数据仓库架构设计、编码实现与持续性能优化,确保系统具备高并发处理能力与服务稳定性。
2.调度系统集成与开发:主导ApacheDolphinScheduler的安装部署、功能扩展与日常维护,制定并优化数据ETL任务的调度方案,保障海量数据作业的高效、可靠执行。
3.数据服务构建:搭建并维护涵盖数据接入、数据计算(Spark/Flink)至Doris数据服务输出的端到端数据链路体系。
任职要求:
1.编程基础:熟练掌握Java语言,具备扎实的代码能力,深入理解IO机制、多线程编程、集合框架、JVM底层原理及性能调优方法。
2.核心大数据框架:
·具备Spark或Flink的实际开发经验,熟悉其运行架构,并拥有任务性能调优实践经历。
·掌握Hadoop生态常用组件(HDFS,YARN,Hive)的基本原理与使用方式。
3.实时数仓经验:有实时数仓项目开发背景,熟练运用ApacheDoris或ClickHouse至少一种,了解其数据建模方式、索引机制与查询加速策略。
4.任务调度工具:具备ApacheDolphinScheduler或Azkaban、xxljob等调度系统的部署、使用或定制化开发经验。
5.数据管道:熟悉Kafka类消息中间件,理解其在实时计算与数据仓库中承担的数据流转角色。
6.系统设计与解决问题能力:具备较强的系统架构设计能力与责任意识,可独立分析并解决复杂技术难题。
优先考虑:
1.具备医疗信息化领域相关工作经验
2.了解数据湖技术、流批一体处理模型,并参与过相关架构落地项目
3.掌握容器化技术(Docker,Kubernetes)及配套编排工具的使用
4.熟悉Linux系统环境,能编写基本的Shell或Python自动化脚本
5.有数据治理、数据质量监控、数据安全防护等工具研发经验者优先
1.核心平台开发:承担基于ApacheDoris的实时数据仓库架构设计、编码实现与持续性能优化,确保系统具备高并发处理能力与服务稳定性。
2.调度系统集成与开发:主导ApacheDolphinScheduler的安装部署、功能扩展与日常维护,制定并优化数据ETL任务的调度方案,保障海量数据作业的高效、可靠执行。
3.数据服务构建:搭建并维护涵盖数据接入、数据计算(Spark/Flink)至Doris数据服务输出的端到端数据链路体系。
任职要求:
1.编程基础:熟练掌握Java语言,具备扎实的代码能力,深入理解IO机制、多线程编程、集合框架、JVM底层原理及性能调优方法。
2.核心大数据框架:
·具备Spark或Flink的实际开发经验,熟悉其运行架构,并拥有任务性能调优实践经历。
·掌握Hadoop生态常用组件(HDFS,YARN,Hive)的基本原理与使用方式。
3.实时数仓经验:有实时数仓项目开发背景,熟练运用ApacheDoris或ClickHouse至少一种,了解其数据建模方式、索引机制与查询加速策略。
4.任务调度工具:具备ApacheDolphinScheduler或Azkaban、xxljob等调度系统的部署、使用或定制化开发经验。
5.数据管道:熟悉Kafka类消息中间件,理解其在实时计算与数据仓库中承担的数据流转角色。
6.系统设计与解决问题能力:具备较强的系统架构设计能力与责任意识,可独立分析并解决复杂技术难题。
优先考虑:
1.具备医疗信息化领域相关工作经验
2.了解数据湖技术、流批一体处理模型,并参与过相关架构落地项目
3.掌握容器化技术(Docker,Kubernetes)及配套编排工具的使用
4.熟悉Linux系统环境,能编写基本的Shell或Python自动化脚本
5.有数据治理、数据质量监控、数据安全防护等工具研发经验者优先
相似职位
很抱歉,暂无相似职位!