インド勤務シニア生成AIエンジニア（リモート）
分析およびAIアプリケーション向けに、スケーラブルなDatabricksデータプラットフォーム、パイプライン、クラウドアーキテクチャを構築します。 インドに拠点を置くクライアント向けに、本番環境のデータソリューションを提供します。
仕事内容
- スケーラブルなデータエンジニアリングおよび分析ソリューションを設計・保守する
- 信頼性の高いバッチデータパイプラインとリアルタイムデータパイプラインを構築する
- Databricksベースのデータプラットフォームとクラウドワークフローを開発する
- 分析、レポート、AIアプリケーション向けに複雑なデータセットを処理する
- データモデルを作成し、規模とパフォーマンスに合わせてワークフローを最適化する
- 構造化データソースと非構造化データソースを接続する
- データ品質、検証、監視、ガバナンスの実践を確立する
- データサイエンティスト、アナリスト、エンジニア、プロダクトチーム、ビジネス関係者と連携する
- ビジネス要件をスケーラブルなデータおよび技術ソリューションに変換する
- パイプライン、処理、パフォーマンス、統合に関する問題を解決する
- 信頼性、効率、コストの面でデータアーキテクチャとワークフローを改善する
- クラウドベースのデータアーキテクチャとプラットフォームのモダナイズを支援する
- 再利用可能なフレームワーク、コンポーネント、エンジニアリングプラクティスを作成する
- 本番環境へのデプロイ、監視、保守を支援する
- データエンジニアリング、クラウド、分析、AI、最新のデータプラットフォームに関する動向を追跡する
応募要件
- データエンジニアリング、分析エンジニアリング、データプラットフォーム、または関連する技術職で5年以上の実務経験
- スケーラブルなデータパイプラインとデータ処理ソリューションを設計・構築した実績
- Databricksおよび最新のクラウドデータプラットフォームの実務経験
- データエンジニアリング、データモデリング、ETL/ELT、分散処理に関する深い知識
- AWS、Azure、またはGoogle Cloud Platformの経験
- Python、SQL、Scala、またはJavaによるプログラミングおよびスクリプト作成の能力
- リレーショナルデータベース、非リレーショナルデータベース、大規模データセットの取り扱い経験
- データアーキテクチャ、統合パターン、パフォーマンス最適化、データ品質に関する知識
- 分析、ビジネスインテリジェンス、機械学習、またはAIのユースケースを実現した経験
- 高い分析力、論理的思考力、問題解決能力
- 技術チームおよび部門横断チームと効果的に協働する能力
- ビジネス関係者に技術概念を明確に説明するコミュニケーション能力
- アジャイルで変化の速い技術環境での経験
- 要件定義から本番実装まで、プロジェクトを自律的に主導する能力
- 新興のデータ、クラウド、分析、AI技術への明確な関心