リモート勤務のビッグデータ基盤エンジニア
国際展開するプラットフォームのビッグデータ基盤をリードします。HDFS、オブジェクトストレージ、Icebergを担当します。 基盤アーキテクチャ、クォータ、カタログ、監視、運用の信頼性を設計します。
仕事内容
- 国際展開するプラットフォームのビッグデータ基盤をリードし、テクニカルリードを務めます。
- HDFS、S3互換のApache Ozoneストレージ、Icebergなどの中核サービスを導入、アップグレード、運用します。
- 少数の非常に大規模なデータセットを数千の小規模テーブルに変換するパイロットを支援します。
- 各事業部門のコンピューティングとストレージのクォータを設定します。
- デフォルトのIcebergカタログから、LakekeeperやGravitinoなどのより高機能な選択肢へ移行します。
- 通知を実際の対応につなげられるよう、監視とアラートを再設計します。
- 並行環境で同じスタックを運用するエンジニアと緊密に連携し、解決策を共有して相互に業務をカバーします。
- アーキテクチャの決定に関わり、古くなったツールを現行のプラットフォームバージョンに置き換えます。
応募要件
- ビッグデータプラットフォームの設計、導入、運用における5年以上の経験。
- HDFSまたはHadoopの導入、アップグレード、トラブルシューティングの実務経験。
- S3互換オブジェクトストレージの導入と運用の実務経験。Apache Ozoneが望ましく、MinIOなどの類似ツールも対象です。
- Apache Icebergの経験。
- データ基盤の監視とアラートを実装した経験。
- 英語力B2レベル。
- GMT+3のタイムゾーンで、時差3時間以内で勤務できること。
- 歓迎：Trino、Kafka、Flinkの経験。
- 歓迎：Lakekeeper、Gravitino、PolarisなどのIceberg RESTカタログの実装経験。
- 歓迎：マルチテナント型データプラットフォームにおけるリソースクォータとコスト配賦の実装経験。
- 歓迎：CopilotやエージェントなどのAIツールを実務で活用し、効率を高めた経験。
福利厚生
- 柔軟な勤務時間とリモート勤務の選択肢。
- 協力と共に成長することを大切にする、意欲的で支え合うチーム。
- 体系的なオンボーディング、個人別の成長計画、定期的なチーム講義やデモ。
- オンボーディング、研修、ソフトスキル開発、リーダーシップ育成の社内プログラム。
- 外部研修やカンファレンス参加費の一部補助。
- グループレッスン、個人レッスン、世界各地の同僚との会話クラブを含む社内英語クラス。
- ホテルや旅行サービスの法人割引。
- MyTime Day Off：有給休暇を追加で1日取得できます。