高级大数据开发工程师
1.3-1.5万元/月
更新 2025-12-16 08:03:00
浏览 466
职位详情
数据开发
5-10年
Java · 要求数据开发经验 · Scala · ETL开发经验 · Kafka · MySQL/SQL Server · 计算机相关专业 · 数据平台开发经验 · Flink · Hive · 制造业行业经验 · Spark · 数据仓库开发经
1.具备扎实的SQL编程能力,拥有大数据引擎下SQL性能调优的实际经验;
2.熟练掌握Java、Scala、Python中至少一门编程语言,理解基础编程原理,具备良好的编码规范与编程习惯;
3.熟悉常用Linux操作命令,具备基本的Shell脚本编写能力;
4.掌握Hadoop、Spark、Flink、Kafka、Hive、StarRocks等主流大数据技术的原理及实际应用;
5.熟悉DataX、Seatunnel、FlinkCDC、Flume等常见数据集成工具,了解各组件间的特性与适用场景;
6.熟悉MySQL、Oracle、SQLServer、PostgreSQL等事务型数据库的优缺点,具备华为GaussDB等高性能数据库使用经验者优先;
7.熟练使用帆软报表、积木报表等常见报表开发工具;
8.理解数据仓库分层架构与建模理论,掌握离线与实时数据处理流程;
9.在掌握各类技术框架的基础上,能结合项目实际需求提出多种技术方案,并确定最优实施方案;
10.能够识别项目中的性能瓶颈,设计并实施优化策略,独立完成性能调优工作,并撰写完整的优化报告;
11.具备良好的沟通协调能力、组织能力及团队合作意识,能合理分解任务、安排进度,并依据整体规划制定阶段性执行计划。
2.熟练掌握Java、Scala、Python中至少一门编程语言,理解基础编程原理,具备良好的编码规范与编程习惯;
3.熟悉常用Linux操作命令,具备基本的Shell脚本编写能力;
4.掌握Hadoop、Spark、Flink、Kafka、Hive、StarRocks等主流大数据技术的原理及实际应用;
5.熟悉DataX、Seatunnel、FlinkCDC、Flume等常见数据集成工具,了解各组件间的特性与适用场景;
6.熟悉MySQL、Oracle、SQLServer、PostgreSQL等事务型数据库的优缺点,具备华为GaussDB等高性能数据库使用经验者优先;
7.熟练使用帆软报表、积木报表等常见报表开发工具;
8.理解数据仓库分层架构与建模理论,掌握离线与实时数据处理流程;
9.在掌握各类技术框架的基础上,能结合项目实际需求提出多种技术方案,并确定最优实施方案;
10.能够识别项目中的性能瓶颈,设计并实施优化策略,独立完成性能调优工作,并撰写完整的优化报告;
11.具备良好的沟通协调能力、组织能力及团队合作意识,能合理分解任务、安排进度,并依据整体规划制定阶段性执行计划。
相似职位
很抱歉,暂无相似职位!