Skip to main content

【東京:リモート】データエンジニア(Databricks・大規模ログ最適化)

Technology
(株)スーパーソフトウエア
Tokyo, 日本¥7,000,000 - ¥10,000,000 /年2ヶ月前まで 2026/4/17

職務内容

【仕事内容】

【職務概要】

トラック製造販売メーカー向け商用車ロジスティクス可視化基盤のデータ処理最適化プロジェクトにて、Databricksを中心としたデータ処理基盤のパフォーマンス改善をご担当いただきます。

車両から発信される膨大なGPSログをリアルタイムに近い形で可視化するため、既存の大規模データ処理基盤に対するチューニング・改善実装が主なミッションとなります。

既存メンバーとチームを組み、技術検討・実装・改善提案を行いながらプロジェクトを推進していただく想定です。

【職務詳細】

■既存データ処理基盤の調査・分析

■ Databricks(PySpark/Scala)を用いた処理の最適化

■ 大規模データ処理ロジックの実装・改修

■ Azureデータ基盤全体のパフォーマンス改善

■ リファクタリング、保守・構成管理

■主な使用技術

・Databricks(PySpark、Scala)

・Apache Spark

・Azure

(Data Factory、SQL Server、SQL Database、Databricks、Functions、Azure DevOps など)

【業務内容変更の範囲】

同社業務全般

【求める人材】

【必須】

技術スキル

・Databricks上でのPySparkを用いた開発・運用の実務経験(データ加工、バッチ処理、ジョブ実装・運用 等)

・Sparkを用いた大規模データ処理の実務経験(数千万行規模以上のデータを扱った経験)

・Azureでのデータ基盤に関わった経験(設計、開発、運用のいずれか)

実務遂行能

・既存のデータ処理ロジックやジョブを理解し、改善・修正できること

・チーム内でのレビューや情報共有を通じて開発を進めた経験

【給与】

年収:700万~1000万程度

月給制:月額437500円

給与:■経験、スキル、年齢を考慮の上、同社規定により優遇

賞与:単価連動制

昇給:年1回(5月)

【勤務地】

東京都渋谷区恵比寿南1-2-11 フォーシーズン恵比寿ビル 4F、お客様先

JR山手線「恵比寿」駅より徒歩1分 ※案件先による

勤務地変更の範囲:取引先(案件先)の勤務地により異なる

【勤務時間】

標準労働時間:10:00~18:45※フレックスタイム制(コアタイム 12:00~15:00)

【雇用・契約形態】

契約期間:無期

試用期間:有(6ヶ月)

【待遇・福利厚生】

スクラムマスター資格取得全額補助、資格手当制度(該当の資格取得で最大4万円の手当を毎月永続的に付与)、書籍購入補助(技術書、ビジネス書など)、ランクごとに定められたクライテリアによる評価制度

喫煙情報:屋内禁煙

【休日・休暇】

【年間休日127日】(2024年度実績) 完全週休2日制(土日休み)、祝日、夏季休暇、年末年始、有給休暇(入社後10日~最高20日付与※初年度は入社日に応じ1~10日)、特別休暇、創立記念日(6/1) 他

Keywords
DatabricksPySparkScalaApache SparkAzure Data FactorySQL ServerAzure DevOpsData Processing OptimizationLarge Scale Data ProcessingReal-time VisualizationRefactoringConfiguration ManagementBatch ProcessingJob ImplementationData EngineerRemoteLarge Scale Log OptimizationTruck ManufacturingCommercial Vehicle LogisticsGPS LogsPerformance ImprovementAzureData FactoryFull-timePermanent ContractFlex Time

¿Te interesa este puesto?