数据工程师
职位描述
该职位来源于猎聘 1. 数据接入与 Pipeline 开发 | Data Ingestion & Pipeline Development通过 API、数据库(MySQL/PostgreSQL/SQL Server)、手工文件等多渠道接入数据,汇入 Snowflake使用 Glue 等 ETL 工具完成数据抽取、清洗、加载;用 Python 做数据清洗与转换在现有数据架构上维护和扩展 pipeline;配合 Airflow 完成调度编排,监控 DAG 运行并排障Snowflake 开发(含 DW/DM 层)| Snowflake Development (incl. DW/DM Layer)负责 schema 设计、表结构开发按既有分层规范,用 SQL / 存储过程新增和增强 DW/DM 分析表(维度表、事实表、汇总表)编写与维护存储过程(Stored Procedure),进行复杂 SQL 调优保证业务口径一致,关注查询性能与成本权限与基础设施/成本管理 负责数据库权限管理: 数据质量与一致性管理 | Data Quality & Consistency负责数据迁移、数据对账,保障源系统与数仓之间数据一致性建立基础校验规则(空值、重复、格式等),对异常数据进行告警与隔离 开发:按接口设计文档完成 API 开发、性能优化与部署运维 负责 SQL 性能优化与故障排查,处理生产环境数据问题 任职要求 本科及以上学历,计算机、软件工程、数学等相关专业2–4 年以上数据开发 / 数仓 / ETL 相关经验 精通复杂查询、多表关联、聚合、窗口函数,具备存储过程开发与调优能力,能独立编写和优化复杂分析型 SQL有存储过程 / 复杂转换逻辑开发经验(Oracle / SQL Server / PostgreSQL / Snowflake 任一)有 DW/DM 分层与维度建模实战经验熟悉 Python,能够编写数据处理、API 调用与自动化脚本熟悉至少一种 ETL 工具(Talend, Glue, Kettle/PDI 等),并熟悉 Airflow 调度SQL (core) 工作严谨,具备良好的文档习惯与数据敏感度逻辑清晰、主动排查问题、沟通顺畅能读写英文技术文档有 AI 提效意识
对这个职位感兴趣吗?