GCPデータエンジニア（リモート、ブラジル）
企業向けITソリューション企業であるEVT向けに、Google Cloud上でバッチおよびストリーミングデータパイプラインを構築します。データ開発、オーケストレーション、ガバナンス、国際的な環境での協業を担当します。
仕事内容
- Google Cloud上でバッチおよびストリーミングデータパイプラインを構築・運用する。
- ビジネス要件を実用的な技術データソリューションに変換する。
- Dataflow、Dataform、Pub/Sub、Cloud Storage、BigQueryを使用してパイプラインを作成する。
- Cloud ComposerとAirflowによるワークフローオーケストレーションを管理する。
- データモデリング、テスト、ガバナンス、セキュリティ、可観測性を担当する。
- 初期開発からデプロイ、ソリューション文書化まで、デリバリーをリードする。
- 技術、ビジネス、国際的なステークホルダーチームと協働する。
応募要件
- ブラジル国外に拠点を置くチームとコミュニケーションできる高度な英語力。
- EST（米国東部標準時）の勤務時間に対応できること。
- GCPを使用したデータエンジニアリングの本番環境での実務経験。
- Dataflow、Dataform、Pub/Sub、Cloud Storage、BigQueryの実務経験。
- パーティショニング、クラスタリング、パフォーマンスチューニング、コスト最適化を含む高度なBigQueryの知識。
- Cloud ComposerまたはAirflowを使用したパイプラインオーケストレーションの経験。
- データモデリング、データウェアハウス、スター・スキーマ、スノーフレーク・スキーマ、SCD、メダリオンアーキテクチャに関する知識。
- Python、Git、コードレビュー、Docker、CI/CDの経験。Cloud Buildの経験があれば尚可。
- Dataplex、IAM、PII保護を含むGCPのデータガバナンス、セキュリティ、可観測性に関する知識。
- 自動テストの経験。pytestの経験があれば尚可。また、データ品質の実践に関する知識。
- Google Professional Data Engineer認定資格があれば尚可。
- BigLake、Apache Iceberg、データレイクハウスアーキテクチャに関する知識があれば尚可。
- Data Meshおよびデータプロダクトの経験があれば尚可。
- SAP ECC、BW、S/4HANAに関する知識があれば尚可。
- データコントラクト、スキーマ進化、可観測性に関する知識があれば尚可。
- 生成AIおよびVertex AIの経験があれば尚可。
- ナレッジトランスファーおよび技術研修の経験があれば尚可。
- 技術者および非技術者に対する優れたコミュニケーション能力。
- ビジネスニーズを技術ソリューションに変換する能力。
- 部門やチームを越えて協働できる姿勢。
- 文書化、デリバリーの追跡、デプロイに関する高い整理能力。
- 英語を日常的に使用しながら、国際的な環境で働く能力。
福利厚生
- Udemyを含む学習インセンティブプログラムを利用できます。
- 手頃な料金の法人向け英語クラス。