
Applaudoは、組織のテクノロジー modernize とデジタルトランスフォーメーションの推進を支援する、ニアショア型のソフトウェア開発会社です。2013年に設立され、イノベーションとエクスペリエンスデザイン、アプリケーションの開発・保守、品質保証、クラウドソリューション、人工知能、サイバーセキュリティ、データソリューション、アプリケーションモダナイゼーションなどの分野で、ソフトウェアエンジニアリングとコンサルティングの専門知識を組み合わせています。スポーツ、メディア・エンターテインメント、小売、消費財、金融サービスなどの業界の顧客にサービスを提供し、デジタル製品、インフラストラクチャ、ITデリバリーの改善につながるプロジェクトを支援しています。テキサス州オースティンに本社を置き、サンサルバドルにもオフィスを構えるApplaudoは、テクノロジーおよびデジタルサービス分野の企業にサービスを提供する501~1,000人のチームを擁しています。
シニア Azure Databricks データエンジニア
Azure Databricks と Python でデータパイプラインを構築し、Applaudo の AI 活用型エンタープライズソリューションを支えます。 企業内のデータソースを接続し、信頼性の高いデータウェアハウスと一元管理型データハブを構築します。
仕事内容
- Azure Databricks と Python を使用して、本番環境のデータパイプラインを構築・保守します。
- PySpark または Spark SQL を使用して、拡張性の高いデータ変換処理を作成します。
- API、リレーショナルデータベース、クラウドストレージ、SFTP からデータを取り込み、処理します。
- チケット管理、CRM、マーケティング、小売など、各種エンタープライズプラットフォームのデータを一元管理型データハブに集約します。
- データウェアハウスの構造、ディメンショナルモデル、データマートを開発・保守します。
- SQL 変換処理を作成、調整、保守します。
- データ品質の検証と整合性チェックを追加します。
- サードパーティーシステム向けのデータフィードを作成・保守します。
- データの不整合を調査し、パイプラインの問題を解決します。
- パイプライン、変換ロジック、依存関係、技術的な手順を文書化します。
- 同僚や関係者と連携してニーズを明確にし、リスクを洗い出し、信頼性の高いデータソリューションを提供します。
- 進捗、障害、遅延の可能性を早めに共有し、次の対応を提案します。
応募要件
- データエンジニアとして5年以上の実務経験。
- Azure Databricks の豊富な実務経験。
- データ処理、変換、パイプライン開発に活用できる高度な Python スキル。
- PySpark または Spark SQL を含む、Apache Spark の確かな経験。
- 複雑な変換、データ検証、クエリのパフォーマンス調整を含む高度な SQL スキル。
- ファクト、ディメンション、データマートを含む、データウェアハウスとディメンショナルモデリングの確かな知識。
- REST API、リレーショナルデータベース、クラウドストレージ、SFTP の接続経験。
- Microsoft Azure のデータサービスを実務で使用した経験。
- データ品質チェックの追加、およびソースシステムとターゲットモデル間の整合性検証の経験。
- パイプライン障害を診断し、データの不整合を調査できること。
- 自律的に業務を進め、責任を持って取り組み、エンジニアリングと文書化の手順を遵守できること。
- 英語での優れたコミュニケーション能力。
- 米国を拠点とするチームと効果的に協働できること。
- SQL ワークロードを Azure Databricks に移行した経験があれば尚可。
福利厚生
- リモート勤務。
- 迅速に学び、責任ある業務を担う機会。
- 優れたチームとの協働。
- 現代的な働き方への投資。
- 大規模な AI ネイティブ変革への参加。
関連求人
求人が見つかりません
フィルターを調整またはクリアして、他の求人を探してみてください。