【東京:リモート】データエンジニア(Databricks・大規模ログ最適化)
職務内容
【仕事内容】
【職務概要】
トラック製造販売メーカー向け商用車ロジスティクス可視化基盤のデータ処理最適化プロジェクトにて、Databricksを中心としたデータ処理基盤のパフォーマンス改善をご担当いただきます。
車両から発信される膨大なGPSログをリアルタイムに近い形で可視化するため、既存の大規模データ処理基盤に対するチューニング・改善実装が主なミッションとなります。
既存メンバーとチームを組み、技術検討・実装・改善提案を行いながらプロジェクトを推進していただく想定です。
【職務詳細】
■既存データ処理基盤の調査・分析
■ Databricks(PySpark/Scala)を用いた処理の最適化
■ 大規模データ処理ロジックの実装・改修
■ Azureデータ基盤全体のパフォーマンス改善
■ リファクタリング、保守・構成管理
■主な使用技術
・Databricks(PySpark、Scala)
・Apache Spark
・Azure
(Data Factory、SQL Server、SQL Database、Databricks、Functions、Azure DevOps など)
【業務内容変更の範囲】
同社業務全般
【求める人材】
【必須】
技術スキル
・Databricks上でのPySparkを用いた開発・運用の実務経験(データ加工、バッチ処理、ジョブ実装・運用 等)
・Sparkを用いた大規模データ処理の実務経験(数千万行規模以上のデータを扱った経験)
・Azureでのデータ基盤に関わった経験(設計、開発、運用のいずれか)
実務遂行能
・既存のデータ処理ロジックやジョブを理解し、改善・修正できること
・チーム内でのレビューや情報共有を通じて開発を進めた経験
【給与】
年収:700万~1000万程度
月給制:月額437500円
給与:■経験、スキル、年齢を考慮の上、同社規定により優遇
賞与:単価連動制
昇給:年1回(5月)
【勤務地】
東京都渋谷区恵比寿南1-2-11 フォーシーズン恵比寿ビル 4F、お客様先
JR山手線「恵比寿」駅より徒歩1分 ※案件先による
勤務地変更の範囲:取引先(案件先)の勤務地により異なる
【勤務時間】
標準労働時間:10:00~18:45※フレックスタイム制(コアタイム 12:00~15:00)
【雇用・契約形態】
契約期間:無期
試用期間:有(6ヶ月)
【待遇・福利厚生】
スクラムマスター資格取得全額補助、資格手当制度(該当の資格取得で最大4万円の手当を毎月永続的に付与)、書籍購入補助(技術書、ビジネス書など)、ランクごとに定められたクライテリアによる評価制度
喫煙情報:屋内禁煙
【休日・休暇】
【年間休日127日】(2024年度実績) 完全週休2日制(土日休み)、祝日、夏季休暇、年末年始、有給休暇(入社後10日~最高20日付与※初年度は入社日に応じ1~10日)、特別休暇、創立記念日(6/1) 他
¿Te interesa este puesto?