シニアデータアーキテクト、CVM・マーケティング分析—エジプトからのリモート勤務
CVM とマーケティング分析向けに、スケーラブルでガバナンスの効いたデータプラットフォームのアーキテクチャを主導します。 バッチ、ストリーミング、レイクハウス、OLAP、多租户ソリューションを設計します。
仕事内容
- データプラットフォーム全体の技術アーキテクチャを主導する
- データの取り込み、保存、処理、変換、提供、ガバナンスの方法を定義する
- スケーラブルなバッチ処理およびストリーミングアーキテクチャを構築し、継続的に改善する
- オープンテーブル形式と適切なクエリエンジンを使用してレイクハウスを設計する
- 分析ワークロード向けのリアルタイム提供アーキテクチャと OLAP アーキテクチャを設計する
- パイプライン、スキーマ進化、データ品質、リネージ、アクセス制御の標準を策定する
- ETL/ELT ワークフローとデータ処理のアーキテクチャパターンを確立する
- プラットフォーム全体で Spark、Kafka、Airflow、SQL などの技術利用を指導する
- 規模、性能、コスト効率、多租户に最適化されたプラットフォームを構築する
- アーキテクチャ上のトレードオフを評価し、技術的な意思決定を明確に伝える
- データチーム向けに再利用可能なアーキテクチャパターンとエンジニアリング標準を作成する
- 同一データプラットフォームアーキテクチャの複数顧客への展開を支援する
- 適切な場合には、データメッシュおよびデータプロダクトの運用モデルに貢献する
- データエンジニアや技術関係者と連携し、標準が一貫して実装されるようにする
- アーキテクチャ上のボトルネックを特定し、信頼性、スケーラビリティ、処理効率を改善する
- スキーマ管理、データガバナンス、データライフサイクル管理の技術戦略を定義する
- セルフマネージドおよびオンプレミスのインフラ環境向けソリューションを設計する
応募要件
- データアーキテクト、テクニカルデータアーキテクト、または同等のシニアアーキテクチャ職での実務経験
- パイプラインの開発と提供を超えて、データプラットフォームアーキテクチャを担当した経験
- バッチおよびストリーミングデータ処理の確かな実務経験
- データアーキテクチャ、ETL/ELT、データウェアハウス、レイクハウス設計に関する深い知識
- Apache Spark、Kafka、Airflow、高度な SQL の実務に精通していること
- レイクハウスアーキテクチャ、オープンテーブル形式、クエリエンジン統合の設計経験
- リアルタイムデータ提供アーキテクチャと OLAP データストアの設計経験
- データモデリング、スキーマ設計、スキーマ進化に関する確かな知識
- データ品質、リネージ、ガバナンス、アクセス制御の標準策定経験
- セルフマネージドまたはオンプレミスのデータインフラを設計・運用した経験
- 分散処理とスケーラブルなデータプラットフォームに関する深い理解
- 多租户データアーキテクチャの設計経験があり、分離性と性能のトレードオフを評価できること
- スケーラビリティ、性能、信頼性、運用の複雑さ、コストの観点からアーキテクチャ判断を評価できること
- 単一のデータプラットフォームを複数顧客に展開する支援経験があれば望ましい
- データメッシュおよびデータプロダクトの運用モデルに関する知識
- データライフサイクル管理とプラットフォームの信頼性に関する深い理解
- データエンジニアリングチーム向けに技術標準とアーキテクチャ指針を確立できること
- 複雑なアーキテクチャ上の意思決定とトレードオフを技術関係者に説明できる優れたコミュニケーション能力
- データエンジニア、プラットフォームエンジニア、その他の技術チームと緊密に協働した経験