高级数据平台开发工程师

职位类别 最低学历 工作年限 工作地点 招聘人数 工作类型
技术>数据分析与管理 本科 不限 杭州市 1人 全职

岗位描述

参与云音乐内部数据开发平台建设工作,工作包含但不限于以下几点:
1、负责云音乐实时、离线开发平台的组件开发和维护工作:包含实时/离线SQL组件、实时/离线数据传输组件、NoteBook等组件的研发和维护工作;
2、日常运维支持工作:平台日常使用问题解答、用户任务优化支持、平台BUG修复运维等;
3、平台生态建设支持:成本统计、容器化改造、任务诊断、运维工具开发等相关外围生态组件建设工作。

岗位要求

1、3年以上数据平台相关开发经验,计算机等相关专业本科以上学历,熟悉大数据完整处理流程,了解大数据平台常用技术架构以及相关常用的开源项目;
2、熟练掌握Spark/Flink/Hive/ClickHouse/Kafka等大数据常用开发框架的使用和优化,参与过相关开源项目者优先;了解数据湖相关存储: Iceberg、Hudi、DeltaLake者,并且有相关使用经验者优先;有PB级数据实时和离线数据处理任务开发和运维的经验者优先;
3、有着比较扎实的Java基础,深入理解JVM,熟练掌握Java Web服务的开发,熟悉分布式系统架构,有大型分布式系统架构经验;
4、良好的沟通表达能力和小组协作能力,勤奋好学,能够承受周期性的项目开发、以及运维压力。
投递简历

扫一扫分享该职位

分享到: