メインコンテンツへスキップ

クラウドデータエンジニア(10779)

Technology
フィデル・コンサルティング株式会社
東京都, 日本1ヶ月前
正社員

職務内容

詳細はこちらをご覧ください。

魅力ポイント

  • 体系的なメンタリングと、データライフサイクル全体にわたる実践的な経験を積める若手向けのポジション
  • モダンなAzureクラウドデータサービス、レイクハウスアーキテクチャ、DataOpsプラクティス、承認済みAIコーディング支援ツールに携わることができる環境
  • データエンジニア、プラットフォーム/SREエンジニア、ビジネスアナリスト、ガバナンス関連のステークホルダーとともに、アジャイルかつ多国籍なチームで協働
年収: 500万円以上

データプラットフォームチームの一員として、保険事業向けに信頼性が高く、安全で再利用可能なデータプロダクトの構築を支援するクラウドデータエンジニアを募集しています。シニアエンジニアの指導のもと、社内外のデータソースをアナリティクス、レポーティング、業務、AIユースケースに接続するクラウドベースのデータパイプラインの開発・運用を担当します。本ポジションは、SQLおよびプログラミングの基礎をお持ちで、Microsoft Azureのデータサービス、モダンなレイクハウスおよびETL/ELTプラクティス、DataOps、保険データの管理要件を学ぶ意欲のある方を対象とした若手向けのポジションです。チームリードやベンダー管理ではなく、コーディング、テスト、ドキュメント作成、監視、問題解決を通じて貢献していただき、体系的なメンタリングとバランスの取れたクラウドデータエンジニアへの成長機会を提供します。

職務内容

  • 承認されたAzureサービスとエンジニアリング標準を用いて、バッチまたは準リアルタイムのETL/ELTパイプラインを開発、テスト、デプロイ、運用支援する
  • データの取り込み、変換、検証、提供のために、読みやすく保守可能なSQLおよびPythonまたはPySparkコードを作成する
  • Source-to-Target Mapping、データモデリング、メタデータ、カタログ、リネージ、技術文書の作成を支援する
  • スキーマ変更、重複、遅延データ、異常レコードへの対応を含む、単体・結合・照合・データ品質テストの自動化を実装する
  • GitとCI/CDのプラクティスを用い、コード、ピアレビュー、リリース、環境間昇格を監査可能な形で管理する
  • パイプラインの稼働状況、データ鮮度、処理時間、失敗を監視し、Runbookに従って調査し、必要に応じて速やかにエスカレーションする
  • 証跡収集や障害後の改善を含む、インシデント、問題、変更、リリース管理の活動に参加する
  • 機微な保険データに対し、最小権限、セキュアコーディング、シークレット管理、プライバシー、保存、規制対応の統制を適用する
  • ビジネスアナリスト、データソースの担当者、データ利用者、グローバル/オフショアのメンバーと協働し、要件を明確化して段階的に価値を提供する
  • 承認済みのAIコーディング支援ツールを責任をもって活用し、出力を検証するとともに機密データを保護する
必須要件
  • コンピュータサイエンス、情報システム、工学、数学または関連分野の学士号、もしくは同等の実務経験
  • 就業、インターンシップ、学業プロジェクト、ブートキャンプ、個人ポートフォリオ等を通じた0~2年程度の関連経験。新卒・第二新卒も歓迎
  • 結合、集計、Common Table Expression、基本的なクエリトラブルシューティングを含むSQLの実務的な知識
  • 関数、データ構造、エラー処理、ログ、テストを理解した上での、Pythonまたはその他の汎用言語による基本的なプログラミング能力
  • リレーショナルデータベース、CSV・JSON・Parquet等のファイル形式、データ型、キー、正規化、基本的なディメンショナルモデリングの理解
  • クラウドの基本概念、およびAzure、AWS、GCPのいずれかのデータサービスまたは学習環境に関する基本的な知識。Azureスキルを深めていく意欲
  • Git、Pull Request、CI/CD、自動テスト、アジャイルデリバリーの基礎知識
  • データ品質、セキュリティ、プライバシー、アクセス制御、顧客情報の適切な取り扱いに関する理解
  • 高い学習意欲、細部への注意、論理的な問題解決力、適切に支援を求め進捗を明確に伝える能力
  • ビジネスレベルの日本語と、技術的なコミュニケーションに必要な実務レベルの英語を用いて多国籍環境で協働する能力、または不足している言語力を伸ばす明確な意欲
歓迎要件
  • Azure Data FactoryまたはSynapse Pipelines、Azure Data Lake Storage、Azure SQL、Microsoft Fabric、Databricks、Apache Sparkのいずれかの経験
  • 小規模であってもエンドツーエンドのデータパイプライン、データモデル、ダッシュボード用データセット、API連携、自動データ品質チェックの構築経験
  • オーケストレーション、監視・可観測性、Infrastructure as Code、コンテナ、またはLinuxコマンドラインツールに関する知識
  • 契約、顧客、保険金、営業、財務、規制データを含む、保険・金融サービスへの関心
  • Microsoft Azure Fundamentals、Azure Data Fundamentals等の入門資格、または同等の学習実績
  • 歓迎:生命保険分野のドメイン知識
語学力:ビジネスレベルの日本語(N2または同等)およびビジネスレベルの英語

会社概要:

当社は、世界中のテクノロジー企業のソフトウェア製品開発ニーズに応える、テクノロジー主導のソフトウェアサービス企業です。現代の企業にとって信頼できるパートナーとして、未来に向けたソフトウェアソリューションを構築しています。 当社は、お客様のニーズや抱負を深く理解し、そのビジョンに沿ったソフトウェアを提供することを目指しています。優れたユーザー体験と究極のシンプルさを重視し、未来を見据えたソフトウェアの創出に情熱を注いでいます。さまざまな業界分野におけるモバイル、Web、クラウドベースのソフトウェア開発サービスを専門とし、世界中のお客様に対応しています。 当社は、通信ネットワーク、オペレーティングシステムの内部構造、デバイスの多様性、および重要なシステムリソースに対する深い理解を必要とする次世代ソフトウェア製品の開発に注力しています。これらのエンジニアリング環境を融合させ、最先端のソフトウェアソリューションを生み出すことが、当社の最大の強みです。

IT・外資系の最新求人をWebsiteで多数掲載中!今すぐチェックして、あなたに合った新着求人を見つけましょう。

Keywords
OrchestrationJSONSqlApache LicenseApache Http ServerCI / CDAWSGitCI/CD

この求人に興味がありますか?

関連