
データエンジニア II — Google Cloud とビッグデータ
アメリカン・エキスプレスで、Google Cloud のデータパイプライン、データベース設計、ビッグデータソリューションを構築します。 拡張性と安全性に優れたデータシステムの維持と、本番環境のサポートを担います。
仕事内容
- データ要件を評価し、既存アーキテクチャとの統合に向けて文書化するとともに、ビジネスデータモデルを維持します。
- パフォーマンス、拡張性、安全性のニーズに応えるデータパイプラインとデータベース設計を構築・改善します。
- BigQuery、DataProc などの Google Cloud サービスを使用します。
- SQL とデータ評価ツールを使用します。
- 設計レビューやテストに参加し、同僚やリーダーの指導のもとで本番システムをサポートします。
- 同僚やリーダーの指導のもとで業務をレビューし、協力し合う学習環境に貢献します。
- ビジネスチームやプロダクトチームと連携し、変更と導入を調整します。
- ビッグデータ、Spark、その他の分散フレームワークに基本的なパーティショニングとインデックス設定を適用します。
- プロダクトチームやビジネスチームと連携し、技術施策をビジネス目標に沿わせます。
応募要件
- コンピューターサイエンスまたはコンピューター工学の学士号、あるいは同等の経験。上位学位があれば尚可。
- 多様なデータストアにわたるビッグデータおよび NoSQL の設計・開発に関する知識。
- ストレージ形式、アクセスアルゴリズム、データ管理プロセス、管理、保守、レプリケーション、高可用性、暗号化を含むデータベース管理システムとエコシステムの知識。
- 分散型の多層システム、アルゴリズム、リレーショナルデータベースおよび非リレーショナルデータベースの知識。
- データエンジニアリングの経験。開発経験を少なくとも4年有すること。
- 大規模なバッチ処理およびリアルタイムデータ処理のパフォーマンス調整経験。
- SQL と Python、または Java などの他のプログラミング言語の使用経験。
- HBase、Hive、Google Cloud ツール、NoSQL、Bigtable、BigQuery、Cloud Spanner などのデータベースシステムを用いた設計・開発経験。
- HBase や Bigtable などの NoSQL データベースの使用経験。
- ビッグデータ環境でのパフォーマンス調整経験。
- 分散システム、アルゴリズム、アプリケーション開発の経験。
- オンライン・トランザクション処理および/またはオンライン分析処理システムの開発・サポート経験。
- Agile、Scrum、Agile XP、テスト駆動開発などのソフトウェア開発手法の経験。
- Google Cloud 認定資格があれば尚可。
- 適用される法律および規制に従い、バックグラウンド確認を完了すること。
福利厚生
- 競争力のある基本給。
- ボーナス制度。
- 経済的な健全性と退職後の備えに関するサポート。
- 勤務地に応じて、医療、歯科、眼科、生命保険、障害補償を提供。
- 職務や事業上のニーズに応じて、柔軟なハイブリッド勤務、出社勤務、またはバーチャル勤務が可能。
- 勤務地に応じて、有給の育児休暇を提供。
- 勤務地に応じて、看護師や医師が常駐する世界各地の社内ウェルネスセンターを無料で利用可能。
- Healthy Minds プログラムを通じて、無料かつ秘密厳守のカウンセリングを提供。
- キャリア開発および研修の機会。



