KAYAKは、数百の旅行サイトに掲載された航空券、ホテル、レンタカーを比較し、旅行計画をサポートする旅行検索・比較プラットフォームです。ウェブサイトとモバイルアプリでは、実用的な条件で検索結果を絞り込んだり、価格アラートで料金を確認したり、KAYAK Tripsで旅行の計画を整理したりできます。モバイル向け料金や旅行通知にも対応し、旅行情報の検索を一か所にまとめながら、より納得のいく予約判断をサポートします。
スタッフデータプラットフォームエンジニア、KAYAK - ベルリンハイブリッド勤務
分析、機械学習、AI を活用した旅行検索を支える KAYAK の共有データプラットフォームの進化をリードします。 スケーラブルなストリーミング、レイクハウス、メタデータ、クエリ基盤を構築します。
仕事内容
- ニアリアルタイムストリーミング、レイクハウスストレージ、スキーマ管理、セマンティックレイヤー、分散クエリ基盤にわたる KAYAK の共有データプラットフォームを設計・発展させる
- 初期の課題定義とアーキテクチャ設計から、実装、展開、運用引き継ぎまでプラットフォーム施策をリードする
- データコントラクト、スキーマ進化、取り込み手法、本番運用準備に関する技術標準を策定する
- ストリーミング取り込み、コンパクション、保持、スキーマガバナンス、可観測性、一般的なデータエンジニアリング課題のための再利用可能なアーキテクチャを作成する
- パイプライン監視、コンシューマー遅延の追跡、データ品質検証、アラートによってプラットフォームの可観測性を実現する
- オペレーション、セキュリティ、エンジニアリング、データエンジニアリング、プロダクトの各チームと連携し、ユーザーニーズに合わせてプラットフォームを発展させる
- 一貫性のあるセルフサービス分析と信頼できる AI データアクセスを支えるセマンティックレイヤーおよびメタデータ戦略をリードする
- ストリーミング、ストレージ、クエリ、オーケストレーション、クラウド基盤に関する技術とアーキテクチャアプローチを評価する
- 設計・コードレビュー、ペアリング、再利用可能な技術ガイダンスを通じてエンジニアをメンタリングする
- リカバリ、スキーマドリフト、パーティション管理、パフォーマンス低下に関する複雑なアーキテクチャおよび運用上の問題を解決する
応募要件
- 7年以上のプロフェッショナルなデータエンジニアリング経験。そのうち相当期間、組織全体に関わる技術スコープでシニアまたはスタッフレベルの業務に携わった経験
- Apache Iceberg、Parquet、クラウドオブジェクトストレージなどの技術を用いた大規模レイクハウスアーキテクチャの設計・運用経験
- イベント駆動型の取り込み、Exactly-once セマンティクス、コンシューマー遅延管理、チェックポイント、リカバリ、障害対応を含むストリーミングパイプラインの本番構築・運用経験
- データコントラクト、スキーマガバナンス、メタデータシステム、セマンティックレイヤーの実務経験
- 高度な Python プログラミングスキルと、保守性・テスト性の高い本番コードを提供した経験
- コンテナ化された基盤、リソースチューニング、ヘルスチェックを含む Kubernetes 上でのデータワークロードのデプロイ・運用経験
- 複数チームに影響を与え、アーキテクチャ上のトレードオフを説明し、導入をリードできる能力
- レビュー、ドキュメント、再利用可能なパターンを通じてエンジニアをメンタリングし、技術標準を改善した経験
- 広範で曖昧な技術課題領域を主体的に担当する意欲
- Trino などの分散クエリエンジンの経験
- Apache Airflow などのワークフローオーケストレーションツールの経験
- AWS または同等のパブリッククラウドプラットフォームの使用経験
- GitHub Actions などの CI/CD およびデプロイ自動化ツールの経験
- Java またはその他の JVM ベース言語の実務知識
福利厚生
- 年間最大20日、ほぼどこからでも勤務可能
- SpringHealth による会社負担のセラピーセッション
- 会社負担の Headspace サブスクリプション
- 毎年、全社で1週間の休暇
- 会議のない金曜日
- 有給の育児休暇
- 有給のボランティア時間
- 能力開発費
- リーダーシップ開発の機会
- 数千件のオンデマンド eラーニングコースを利用可能
- 旅行割引
- 従業員リソースグループ
- 6週間の有給休暇に加え、誕生日の休暇1日
- 週2日の無料ランチ
- 年金制度への拠出
- 公共交通機関の補助
- 自転車リースプログラム
- 毎月の交流イベント、木曜日のハッピーアワー、スポーツチーム
- ベルリンのフリードリヒスハインにあるオフィス