跳转到主要内容

资深数据开发工程师

Technology
特步(中国)有限公司
厦门-思明区, 中国¥12,000 - ¥25,000 /月1个月前

职位描述

【岗位职责】: 1.负责企业级数据中台平台架构设计、技术选型、系统优化; 2.负责建设企业级大数据治理/管理平台体系建设; 3.负责对业务提供支撑的大数据服务能力建设; 4.负责BI类数据应用平台的日常管理和运维; 5.上级领导交办的其它事项的及时处理。 【任职资格】: 1、本科及以上学历,计算机、通信、数学或相关专业优先; 2、有五年的大数据架构经验,对大数据平台有深刻理解,掌握Hadoop/Spark/Doris生态圈的关键技术;制定技术发展路线,进行框架选型(如Hadoop、Spark、Flink等),推动平台持续演进; 3、负责大数据平台的整体技术架构规划和设计,包括数据采集、存储、处理、分析和服务化体系的构建; 4、系统开发与优化,主导核心模块的设计与编码实现,解决分布式系统中的性能瓶颈和技术难题。对大数据平台进行性能调优、稳定性提升和高并发保障,优化ETL流程与实时计算能力; 5、熟悉数据仓库分层分主题的数据架构,掌握主题域数据模型设计,熟悉ETL开发流程和规范; 6、熟悉数据应用方向,如各类BI报表、业务指标体系设计; 7、熟悉数据治理方法论和工作流程、熟悉数据治理平台实施开发,对数据治理的开源组件和产品较熟悉; 8、技术栈掌握:精通Hadoop、Spark、Doris、Flink、Kafka、Hive、HBase、YARN等生态组件;熟悉Linux环境与Shell脚本编程;精通Java/Scala/Python至少一种语言。

Keywords
5-10年ScalaApache KafkaApache SparkApache HBaseHiveHbase

对这个职位感兴趣吗?