
シニアデータエンジニア(リモート、カナダ)—Capgemini
Capgeminiのデジタルトランスフォーメーションサービスを支える、スケーラブルなデータ処理アプリケーションとETLパイプラインを構築します。 分析、レポート、機械学習を支える分散ワークロードを最適化します。
仕事内容
- Apache技術とSQLを使用して、スケーラブルなデータ処理アプリケーションを作成、拡張、サポートする
- PythonとScalaで高スループットのETLおよびデータ変換パイプラインを開発する
- バッチおよびニアリアルタイムのデータ処理ワークフローを構築し、チューニングする
- Parquet、Hive、分散ストレージプラットフォームにまたがる大規模データセットを扱う
- 高性能なSQLクエリを作成し、規模と効率性を高めるために実行計画を改善する
- データモデル、パーティショニング方式、ストレージアーキテクチャを定義する
- データエンジニア、ソフトウェアエンジニア、データサイエンティスト、プロダクトチームと連携する
- データアプリケーション向けの自動テスト、監視、デプロイワークフローを確立する
- データ品質、信頼性、セキュリティ、ガバナンス要件を維持する
応募要件
- コンピューターサイエンス、工学、または関連する技術分野の学士号または修士号
- ソフトウェアエンジニアリングまたはデータエンジニアリングにおける5年以上の実務経験
- Apache技術、SQL、Python、Scalaに関する実務的な専門知識
- 分散データ処理向けアプリケーションの開発経験
- Hive、Parquet、HDFSなどのHadoopエコシステムツールに関する確かな知識
- 大規模データ向けETLパイプラインの作成およびチューニング経験
- 高度なSQL開発およびクエリチューニング能力
- Linuxシステムとシェルスクリプトに関する実務知識
- Gitなどのソース管理ツールの使用経験
- AWS、分散コンピューティング、大規模データアーキテクチャ、Airflowによるオーケストレーション、データレイクまたはレイクハウス環境の経験があれば尚可
福利厚生
- 等級に応じて12~25日の休暇
- 有給の会社休日
- パーソナルデー
- 病気休暇
- 医療、歯科、視力補償、またはカナダの州医療制度との調整
- カナダのRRSPなどの退職貯蓄制度
- 生命保険および就業不能保険
- 従業員支援プログラム
- その他の福利厚生は、現地の方針と資格により決定
- 変動報酬、賞与、またはコミッションが提供される場合があります









