aws数据工程师
Technology
上海市, 中国¥20,000 - ¥30,000 /年1周前截至 2026/6/9
全职
职位描述
该职位来源于猎聘 熟悉 AWS 云,包括安全 / 成本优化方面,具有跨账号部署项目的经验。 有 IAC 经验,会使用 Terraform 部署 AWS 资源是必须的。 有 GLUE/LAKEFORMATION/ATHENA/EMR/REDSHIFT 经验加分。 有阿里云,AZURE 经验加分。 熟悉大数据生态圈,包括 hadoop/spark,有 ETL 工作的经验。 熟悉 python,可以用 pyspark 写 ETL 是必须的。 会写 JAVA/Scala。 有 SPARK UDF 开发经验加分。 熟悉 Linux,可以用 BASH 做一些自动化工作。 熟悉 Windows 加分。 有 git action 的经验加分,如果没有,必须有其它 CICD 工具的经验。 逻辑思维清晰。 有一定的抗压能力。 懂一些 Hadoop /Spark 原理(代码优化需要) 有 serverless 开发经验(AWS/IAC 需要)
Keywords
ScalaApache HadoopApache SparkRedshiftLinuxPythonHadoopJavaCI / CDAWSGitTerraformCI/CD
¿Te interesa este puesto?