シニアデータエンジニア—インドリモート
Azureベースのデータプラットフォーム、パイプライン、統合基盤の設計をリードし、エンタープライズ分析とAI/MLを支援します。ライフサイエンスおよびヘルスケアに注力する組織でのシニアポジションです。
仕事内容
- Azure Databricks、PySpark、Azure Data Factory、Azure SQLを使用してエンドツーエンドのデータソリューションを設計・提供する
- ソースシステム、統合、データ利用にまたがるデータパイプラインを構築・保守する
- データレイク全体にブロンズ、シルバー、ゴールドレイヤーのモデリング標準を適用する
- 概念モデル、論理モデル、物理モデルを作成する
- 拡張性、性能、コスト効率を高めるためにSparkおよびSQLワークロードをチューニングする
- データ準備、データ統合、AI対応ツールを使用してメタデータを管理する
- データ統合と再利用可能なデータ準備プロセスを自動化する
- REST/JSON API統合とリアルタイム取り込みフレームワークを開発する
- Azure DevOpsとGitベースのCI/CDによってデリバリーワークフローを自動化する
- 取り込みおよび変換パイプライン用の再利用可能なテンプレートを作成する
- 自動化された単体テスト、回帰テスト、統合テストのフレームワークを構築する
- ビジネスインテリジェンス、レポート、高度な分析のためにデータセットを準備・整理する
- 分析チームと連携してセマンティックモデルとKPIを確立する
- セルフサービス分析向けに性能を最適化したモデルを開発する
- 必要に応じてエンドユーザーにデータ可視化を支援する
- 技術設計レビューを主導し、ジュニアエンジニアを指導する
- 部門横断チーム、ビジネスアナリスト、ステークホルダーとデータ要件を収集・精緻化する
- データエンジニアリング施策をビジネスおよびITの目標と整合させる
- アーキテクチャロードマップを支援し、新興技術を評価する
- 業務上の非効率を特定し、経営層に改善案を提案する
応募要件
- コンピューターサイエンス、情報システム、工学、または関連分野の学士号
- エンタープライズ規模のデータソリューションを設計・開発した5～8年の経験
- Databricks、Azure Fabric、PySpark、SQL、Azure DevOpsに関する高度なスキル
- Azure Data Factory、ADLS Gen2、Azure SQL Serverの実務経験
- データウェアハウス、データレイク、データカタログを含むMicrosoft Azureデータアーキテクチャに関する深い知識
- Power BIの経験。TableauまたはLookerの経験があれば尚可
- CI/CD自動化、Git、およびARM、Bicep、Terraformを使用したInfrastructure as Codeの実務知識
- GxP、GDPR/HIPAA、および関連するCFR、CTR、CTD規制に関する理解
- ITおよびビジネスのステークホルダーと協働し、分析・データサイエンスの成果を業務プロセスやワークフローに組み込んだ実績
- 優れた文書および口頭でのコミュニケーション能力
- 重要な期限を守りながら、自律的かつ協調的に働く能力