
シニア Databricks データエンジニアリングコンサルタント
SDG Groupで顧客向けデータエンジニアリングの提供を主導し、拡張性の高いDatabricksソリューションを構築してSQL変換を最適化します。 技術的な意思決定を導き、同僚を育成し、顧客がクラウドデータプラットフォームをビジネス成果につなげる支援をします。
仕事内容
- 設計、テスト、継続的なサポートを通じて、Databricks上に拡張性の高いデータソリューションを構築・保守します。
- トラブルシューティングとパフォーマンス調整により、複雑なSQLクエリと変換ロジックを改善します。
- データエンジニアリングの業務領域を主導し、根拠に基づく技術的な意思決定を行います。
- ETL/ELT手法と統合ツールを用いて、構造化・非構造化データソースを接続します。
- レポーティング、分析、AI、後続処理向けに、拡張性の高いデータモデルとデータウェアハウス構造を設計・レビューします。
- クラウドデータプラットフォームのアーキテクチャ設計とモダナイゼーションに貢献します。
- 開発、テスト、ドキュメント作成、デプロイ、保守性、ガバナンスに関する確かなデリバリー手法を整備します。
- データ品質、信頼性、拡張性、およびクエリやパイプラインの性能に関する問題を解決・改善します。
- 顧客の関係者と連携し、ニーズを明確にし、トレードオフを説明し、解決策を提案して技術面の期待値を設定し、エンジニアリング上の選択をビジネス成果に結び付けます。
- 複数分野のチームと連携し、技術成果物をレビューして実践知を共有し、若手エンジニアやコンサルタントを育成します。
- Databricksの機能、データエンジニアリング手法、業界の実践動向を継続的に把握します。
- 専門知識を共有し、SDGコミュニティ全体に技術的なリーダーシップを発揮します。
応募要件
- データエンジニアリング、データウェアハウス、データ統合、アナリティクスエンジニアリング、または関連する技術分野で約5~7年以上の経験があること。
- 複雑な技術デリバリーを責任者として遂行した実績があること。
- 本番環境のデータエンジニアリングおよび分析ワークロードを含む、Databricksの豊富な実務経験があること。
- Databricks SQLを高度に活用できること。
- 結合、CTE、ウィンドウ関数、集計、複雑な変換、パフォーマンス調整、データ検証を含む高度なSQLスキルがあること。
- Pythonまたはその他の関連するプログラミング言語・スクリプト言語を使いこなせること。
- データパイプライン、ETL/ELT、統合、データウェアハウス、変換パターン、本番データエンジニアリングの実践を深く理解していること。
- ディメンショナルモデリングと最新のデータモデリング概念を理解していること。
- 最新のクラウド環境とエンタープライズ規模のデータプラットフォームに関する豊富な経験があること。
- 最新のデータエンジニアリング、オーケストレーション、または変換ツールを使用した経験があること。
- 複数のソースシステムとターゲットシステムにまたがるデータ検証、照合、トラブルシューティング、パフォーマンス調整を主導できること。
- 確かな分析力とアーキテクチャ上の判断力があること。
- 文書および口頭で効果的にコミュニケーションできること。
- 技術的な議論を主導し、関係者に働きかけ、複雑な内容を明確に説明し、顧客の信頼を得られること。
- 同僚を育成し、技術力とコンサルティングスキルを継続的に伸ばせること。
- コンサルティングまたはその他の顧客対応経験が強く望まれます。
- Matillionおよび/またはdbtの経験が特に望まれます。
- Databricks SQL Warehouses、Delta LakeまたはDelta Tables、Databricks Workflows、Unity Catalog、Snowflake、PySpark、大規模なエンタープライズデータ移行またはモダナイゼーションの経験が望まれます。
- 製薬、ライフサイエンス、ヘルスケア、またはその他の規制の厳しい業界での経験が望まれます。
福利厚生
- 成長を続けるハイテク分野でのフルタイム勤務。
- 成果に基づく文化のもとで、キャリア形成と専門性の向上を支援。
- 競争力のある給与。
- 会社のマッチング拠出がある401(k)退職年金制度。
- 医療、歯科、視力、障害補償。
- 3週間以上の有給休暇。
- 柔軟な祝日休暇制度。
- 出社とリモートを組み合わせたハイブリッド勤務。
- 最新のデータ、分析、AI技術に関する継続的な研修と実務経験。
- 経験豊富な専門家と協力して働ける職場。
- 内容の充実した顧客プロジェクト。








