Leegaの中級GCPデータエンジニア（リモート）
LeegaでGCPデータエンジニアとして、スケーラブルなパイプラインと最新のデータプラットフォームを構築します。Databricks、Spark、ETL/ELT、Lakehouseアーキテクチャを活用します。
仕事内容
- スケーラブルなETL/ELTデータパイプラインを構築・保守する
- GCP環境でのデータ取り込み、変換、配信を管理する
- SparkとPySparkを使用してDatabricksソリューションを開発する
- Data Lake、Data Warehouse、Lakehouseアーキテクチャを設計・改善する
- API、データベース、ストリーミングプラットフォームなどのデータソースを接続する
- データ品質、ガバナンス、プラットフォームの信頼性を維持する
- パフォーマンスを追跡し、クラウドインフラコストを削減する
- BI、アナリティクス、データサイエンスのチームと連携する
応募要件
- データエンジニアとして4年以上の実務経験
- BigQuery、Cloud Storage、DataflowなどのGoogle Cloudサービスを実務で使用した経験
- DatabricksとSparkを用いた分散データ処理の経験
- PythonとSQLに関する高いスキル
- リレーショナルデータモデリングおよびディメンショナルデータモデリングの経験
- Airflowまたは同等のツールによるパイプラインオーケストレーションの経験
- Gitとバージョン管理の実務知識
- Delta Lakeの使用経験
- Infrastructure as CodeのためのTerraformに関する知識
- Dockerの使用経験
- KafkaやPub/Subなどのストリーミング技術に関する知識
- GCPまたはDatabricksの認定資格
- Lakehouseアーキテクチャの設計経験
- Power BI、Looker、TableauなどのBIプラットフォームに関する知識
- データガバナンスとブラジルの一般データ保護法（LGPD）に関する理解
- 中級または上級レベルの英語力
福利厚生
- 継続的な専門能力開発の機会
- 完全リモート勤務
- 障害のある方も応募可能