大数据开发运维工程师

岗位职责 1. 负责网易有数、DataWorks两大平台的数据开发与运维，完成全链路数据采集、清洗、转换与归一化整合，保障多源异构数据准确、完整、时效达标。 2. 基于两大平台完成数仓搭建、分层建模与表设计，落地数据规范，支撑海量数据存储、多维分析、实时统计等场景，保障平台数据体系稳定运行。 3. 独立完成业务报表开发与可视化看板搭建，输出标准化数据服务接口，支撑业务团队复盘、效果分析、决策优化等全场景数据需求。 4. 负责平台大数据任务的调度部署、线上监控与日常运维，及时排查解决任务失败、数据延迟、查询慢等线上问题，保障数据稳定产出。 5. 持续优化两大平台的大数据架构、存储与计算性能，梳理冗余链路，推进数据治理，提升平台数据服务效率与质量。 6. 对接业务完成需求调研，基于场景设计维度模型，沉淀核心指标体系，同步完成技术文档编写与沉淀。 任职要求 1.全日制统招本科及以上学历，计算机、统计、数学等相关专业，1-3年数据开发或大数据运维经验，有网易有数或DataWorks实际使用经验优先。 2. 熟练掌握Hadoop、Spark、Flink等主流大数据框架，精通Hive、MySQL开发，具备扎实的SQL编写与性能调优能力。 4. 熟悉Linux系统，熟练使用Shell、Python至少一种脚本语言，可独立完成大数据集群运维、监控配置与常见故障排查。 4. 具备数仓建模经验，理解数仓分层架构，有离线或实时数仓建设落地经验优先。 5. 熟悉Doris、Druid、StarRocks等OLAP引擎使用与调优。 6. 业务理解能力良好，可独立对接需求、拆解任务，具备较强的问题分析与攻坚能力。 7. 工作严谨细致，具备良好协作与沟通能力，能跟进技术趋势，持续优化平台数据服务流程。