
Applaudoは、組織のテクノロジー modernize とデジタルトランスフォーメーションの推進を支援する、ニアショア型のソフトウェア開発会社です。2013年に設立され、イノベーションとエクスペリエンスデザイン、アプリケーションの開発・保守、品質保証、クラウドソリューション、人工知能、サイバーセキュリティ、データソリューション、アプリケーションモダナイゼーションなどの分野で、ソフトウェアエンジニアリングとコンサルティングの専門知識を組み合わせています。スポーツ、メディア・エンターテインメント、小売、消費財、金融サービスなどの業界の顧客にサービスを提供し、デジタル製品、インフラストラクチャ、ITデリバリーの改善につながるプロジェクトを支援しています。テキサス州オースティンに本社を置き、サンサルバドルにもオフィスを構えるApplaudoは、テクノロジーおよびデジタルサービス分野の企業にサービスを提供する501~1,000人のチームを擁しています。
シニア Azure Databricks データエンジニア
Azure Databricks と Python でデータパイプラインを構築し、Applaudo の AI 活用型エンタープライズソリューションを支えます。 ビジネスデータを、拡張性と信頼性に優れたデータハブやウェアハウスに接続します。
仕事内容
- Azure Databricks と Python を使用して、本番環境に対応したデータパイプラインを構築・保守します。
- PySpark または Spark SQL を使用して、拡張性の高い変換処理を作成します。
- API、リレーショナルデータベース、クラウドストレージ、SFTP からデータを取り込み、処理します。
- チケット管理、CRM、マーケティング、小売などのエンタープライズプラットフォームを、中央の Data Hub に接続します。
- データウェアハウスの構造、ディメンショナルモデル、データマートを開発・保守します。
- SQL 変換処理を作成、調整、保守します。
- データ品質の検証と整合性チェックを追加します。
- サードパーティーシステム向けの送信データフィードを構築・保守します。
- データの不一致を調査し、パイプラインの問題を解決します。
- パイプライン、変換ロジック、依存関係、技術プロセスを文書化します。
- 同僚や関係者と連携し、要件を明確にしてリスクを特定します。
- 進捗、障害、遅延の可能性を早めに共有し、成果物を予定どおりに進めるための対応策を提案します。
応募要件
- データエンジニアとして5年以上の実務経験。
- Azure Databricks の豊富な実務経験。
- データ処理、変換、パイプライン開発に活用できる高度な Python スキル。
- PySpark や Spark SQL を含む、Apache Spark の確かな経験。
- 複雑な変換、データ検証、クエリ性能のチューニングを含む高度な SQL スキル。
- ファクト、ディメンション、データマートを含む、データウェアハウスとディメンショナルモデリングに関する深い知識。
- REST API、リレーショナルデータベース、クラウドストレージ、SFTP からのデータ統合経験。
- データ取り込み、保存、処理、統合における Microsoft Azure データサービスの実務経験。
- データ品質チェックを実装し、ソースシステムとターゲットデータモデル間の整合性を検証した経験。
- パイプライン障害を診断し、データの不一致を調査して、信頼性の高い修正を実施できること。
- 優れた分析力、問題解決力、組織力。
- 自律的に業務を進め、責任を持ち、エンジニアリングの実践規範と文書化基準に従えること。
- 高い英語でのコミュニケーション能力と、米国拠点のチームと協働する能力。
- SQL ベースのワークロードを Azure Databricks に移行した経験があれば尚可。
福利厚生
- リモート勤務を選択できます。
- 迅速に学び、優れたチームと働く機会があります。
- 現代的な働き方を採用しています。
- 大規模な AI ネイティブ変革に貢献できます。
関連求人
求人が見つかりません
フィルターを調整またはクリアして、他の求人を探してみてください。