
IGT データエンジニア II
IGTでDatabricksとAWSを活用したデータパイプラインを構築し、全社分析、業務レポート、AIの取り組みを支援します。 米国内の勤務地で働くフルタイムの出社勤務です。
仕事内容
- Databricks、Apache Spark、SQL、Pythonを使用して、拡張性の高いELTおよびETLパイプラインを構築・保守します。
- 全社分析、業務レポート、AIアプリケーション向けに信頼性の高いデータセットを提供します。
- Delta LakeとLakehouseアーキテクチャの手法を用いてデータを変換します。
- 業務アプリケーション、API、データベース、ファイル、その他の社内外のソースからデータを接続します。
- ステークホルダー、アナリスト、プロダクトチームと連携し、データニーズを拡張性の高いソリューションに落とし込みます。
- 本番パイプラインを監視し、問題を調査して調整を行い、大規模環境でも安定した性能を確保します。
- 従来のデータ処理を最新のクラウドネイティブアーキテクチャへ移行する取り組みを支援します。
- 検証、テスト、監視、自動化を通じてデータ品質を高めます。
- コードレビュー、ドキュメント作成、知識共有を通じてエンジニアリング標準を支えます。
- 業務の自動化と効率化、全社データプラットフォームの改善につながる方法を探します。
応募要件
- コンピューターサイエンス、情報システム、工学または関連分野の学士号、または同等の実務経験。
- データエンジニアリングまたは関連する技術職で3年以上の経験。
- SQL開発の高いスキル。
- Pythonプログラミングの高いスキル。
- Apache SparkとDatabricks、または同等の分散データ処理プラットフォームでパイプラインを構築した経験。
- 最新のETLおよびELTパイプラインの開発経験。
- データモデリングとデータウェアハウスに関する知識。
- クラウドデータプラットフォームの経験。AWSの経験があれば尚可。
- Delta Lakeまたは同等の最新データストレージ技術に関する知識。
- Gitと共同ソフトウェア開発の経験。
- 優れた分析力、トラブルシューティング能力、問題解決能力。
- 明確なコミュニケーション力と協調性。
- 歓迎条件:S3、IAM、Lambda、GlueなどのAWSサービスの使用経験。
- 歓迎条件:AWS上でDatabricksを使用した経験。
- 歓迎条件:Delta LakeおよびMedallionまたはLakehouseアーキテクチャの経験。
- 歓迎条件:Databricks Workflows、Apache Airflow、または同様のオーケストレーションツールの使用経験。
- 歓迎条件:REST APIの開発または利用経験。
- 歓迎条件:JSONやExcelファイルなど、半構造化データの取り込み経験。
- 歓迎条件:データエンジニアリングにおけるCI/CDの知識。
- 歓迎条件:AI/MLワークフローに関わった経験、または機械学習や生成AI向けのデータ準備経験。
- 歓迎条件:ゲーム、ホスピタリティ、金融サービス、その他のデータ集約型業界での経験。
福利厚生
- 会社拠出のある401(k)貯蓄プラン。
- 医療保険。
- 歯科保険。
- 視力保険。
- 生命保険。
- 障害補償。
- 有給休暇。
- 学費補助。
- ウェルネスプログラム。
- 職務と受給資格に応じて、賞与またはコミッションが支給される場合があります。

