跳转到主要内容

大数据工程师

Technology
安客诚中国
上海市, 中国¥25,000 - ¥35,000 /月2周前截至 2026/12/26
全职

职位描述

该职位来源于猎聘 【岗位职责】 1. 负责公司数据平台的设计、开发与维护,搭建稳定、高效的数据处理流程; 2. 构建和优化数据采集、清洗、转换(ETL/ELT)流程,支持数据仓库建设; 3. 与数据分析师、算法工程师合作,提供结构化和非结构化数据支持; 4. 管理和优化数据存储系统(如Hadoop、Spark、Hive、ClickHouse等); 5. 负责数据质量管理,保障数据的完整性、准确性与时效性; 6. 参与公司数据治理体系建设,推动数据标准化与数据资产管理。 ________________________________________ 【任职要求】 1. 本科及以上学历,计算机、软件工程、信息管理或相关专业; 2. 熟悉至少一种主流数据编程语言,如 Python、 Scala; 3. 熟练掌握 SQL,了解数据仓库建模. 4. 有使用主流数据处理工具经验,如 Flink、Kafka、Spark、Hadoop 等; 5. 熟悉云服务平台(如 AWS/Ailyun/Azure)中数据相关服务 (Azure Databricks/ADF. AliCloud Dataworks/MaxCompute); 6. 有数据治理相关项目经验(元数据管理,DQC策略梳理与实施,数据血缘搭建与维护) 7. 有数据产品使用经验(Ali Dataphin/火山DataWind/DataLeap)者优先 8. 有实际的实时/流式数据处理项目经验者优先 9. 具备良好的数据敏感性与业务理解能力,有大型数据系统(DMP/CDP等) 搭建经验者优先; 10. 具备一定的售前项目材料整理与汇报能力 ________________________________________ 【加分项】

  • 有ToB行业数据项目经验
  • 有餐饮行业数据项目经验
  • 熟悉数据安全、数据合规(如GDPR、数据脱敏等);
  • 有 DevOps、数据可观测性相关实践经验;
  • 了解机器学习平台或数据科学平台的基础设施构建。

Keywords
ScalaApache HadoopApache KafkaApache SparkDevOpsPythonSqlHiveHadoop

对这个职位感兴趣吗?