大数据开发工程师

岗位职责： 负责市场领域公开数据的采集、清洗、标注、质量评估及管理工作，构建数据流水线和领域知识库 任职资格： 1.熟悉数据处理工具（Pandas/Spark/Flink等）和ETL流程设计； 2.熟悉数据仓库相关理论和数据仓库建设 3.熟悉clickhouse、doris、starrocks等数据库，能够使用SQL, Python、Shell 等脚本语言完成数据处理与自动化任 4.具有大数据处理、知识图谱构建或AI数据平台开发经验者优先。