高级Java开发(大数据方向)
1.5-1.7万元/月
更新 2026-01-09 17:50:46
浏览 604
职位详情
Java
5-10年
Java · 大数据经验 · 不接受居家办公 · Docker · PostgreSQL · MySQL · Spark · 架构设计经验 · Spring
岗位职责:
1.核心平台开发:承担基于ApacheDoris的实时数据仓库架构设计、开发与持续性能优化,确保系统具备高并发处理能力与服务稳定性。
2.调度系统集成与开发:负责ApacheDolphinScheduler的安装部署、功能扩展及日常维护,制定并优化ETL任务调度方案,保障海量数据作业的高效、可靠执行。
3.数据服务构建:打造并维护涵盖数据接入、数据处理(Spark/Flink)至Doris服务输出的端到端数据链路体系。
任职要求:
1.编程基础:熟练掌握Java语言,具备扎实的编码能力,深入理解IO机制、多线程编程、集合框架、JVM工作原理及性能调优方法。
2.核心大数据框架:
·具备Spark或Flink的实际开发经验,熟悉其运行架构,并有典型任务性能调优实践。
·掌握Hadoop生态常用组件(HDFS,YARN,Hive)的基本原理与使用场景。
3.实时数仓经验:具有实时数据仓库建设经验,熟练运用ApacheDoris或ClickHouse至少一种,了解其数据建模方式、索引机制与查询加速策略。
4.任务调度工具:具备ApacheDolphinScheduler或Azkaban、xxljob等调度系统的实际操作、部署或定制化开发经历。
5.数据管道:熟悉Kafka等消息中间件,理解其在实时计算与数仓协同中的数据流转逻辑。
6.系统设计与解决问题能力:具备较强的系统架构设计能力与责任意识,能够独立分析并解决复杂技术难题。
优先考虑:
1.具备医疗信息化领域项目背景者优先
2.了解数据湖技术、流批一体架构,并参与过相关落地项目
3.掌握容器化技术(Docker,Kubernetes)及配套编排工具的使用
4.熟悉Linux环境,具备Shell或Python脚本编写能力
5.有数据治理、数据质量监控、数据安全类工具开发经验者优先
1.核心平台开发:承担基于ApacheDoris的实时数据仓库架构设计、开发与持续性能优化,确保系统具备高并发处理能力与服务稳定性。
2.调度系统集成与开发:负责ApacheDolphinScheduler的安装部署、功能扩展及日常维护,制定并优化ETL任务调度方案,保障海量数据作业的高效、可靠执行。
3.数据服务构建:打造并维护涵盖数据接入、数据处理(Spark/Flink)至Doris服务输出的端到端数据链路体系。
任职要求:
1.编程基础:熟练掌握Java语言,具备扎实的编码能力,深入理解IO机制、多线程编程、集合框架、JVM工作原理及性能调优方法。
2.核心大数据框架:
·具备Spark或Flink的实际开发经验,熟悉其运行架构,并有典型任务性能调优实践。
·掌握Hadoop生态常用组件(HDFS,YARN,Hive)的基本原理与使用场景。
3.实时数仓经验:具有实时数据仓库建设经验,熟练运用ApacheDoris或ClickHouse至少一种,了解其数据建模方式、索引机制与查询加速策略。
4.任务调度工具:具备ApacheDolphinScheduler或Azkaban、xxljob等调度系统的实际操作、部署或定制化开发经历。
5.数据管道:熟悉Kafka等消息中间件,理解其在实时计算与数仓协同中的数据流转逻辑。
6.系统设计与解决问题能力:具备较强的系统架构设计能力与责任意识,能够独立分析并解决复杂技术难题。
优先考虑:
1.具备医疗信息化领域项目背景者优先
2.了解数据湖技术、流批一体架构,并参与过相关落地项目
3.掌握容器化技术(Docker,Kubernetes)及配套编排工具的使用
4.熟悉Linux环境,具备Shell或Python脚本编写能力
5.有数据治理、数据质量监控、数据安全类工具开发经验者优先
相似职位
很抱歉,暂无相似职位!