大数据开发工程师 hr 1月 4, 2024

大数据开发工程师

岗位职责:
1、完成数据仓库的建设架构设计及开发,完成业务数据ETL流程处理,并确保数据质量。
2、负责TB级别大数据的清洗、储存,处理,分析等场景的开发。
3、负责批计算、流计算的开发、优化、维护和改造。
4、负责公司核心数据处理业务开发,维护和优化。
5、负责数据平台能力建设,大数据相关组件调研和使用。

岗位要求:
1、计算机或相关专业本科以上学历,至少5年以上大数据架构相关工作经验。
2、丰富的数据平台架构经验,熟悉数据仓库建模及ETL设计开发。
3、精通SQL和Spark处理方法,具有一线coding的能力,至少1年的Spark(Core/Streaming/SQL)开发经验,熟悉Java、Scala等其中一种编程语言。
4、熟练掌握分布式存储相关技术,包括HDFS,Redis、Kafaka、Zookeeper、ElasticSearch等。
5、有大数据项目实战经验,熟悉Hadoop、Hbase、flink, Druid等开源框架,并熟悉其工作原理。
6、具有较强的内外沟通能力,良好的团队意识和协作精神。
7、有前瞻性的整套数据管理、数据服务等解决方案的规划和落地经验的优先考虑。
工作地点: 广州
工作类型: 技术
社招/校招: 社会招聘

对该职位感兴趣?

填写下方表格,我们会在第一时间与您联系!

点击或拖拽文件上传简历允许的文件大小: 80 MB.
允许的文件类型: .pdf, .doc, .docx, .rtf