AVANTTi
AVANTTi
AVANTTiは、テクノロジーとイノベーションの取り組みを測定可能なビジネス価値へと転換できるよう組織を支援する、ブラジルのテクノロジーサービス企業です。IT人材の配置と人材ソーシング、チームの迅速な編成、ABAP、Java、.NETなどの技術を用いたソフトウェアファクトリーによる開発、VMO(Value Management Office)手法によるポートフォリオおよびSAFe管理などのサービスを提供しています。銀行、製造、物流、小売、教育などの分野におけるデジタルトランスフォーメーションとエンタープライズITの提供を支援し、クリチバ、サンパウロ、リオデジャネイロで事業を展開しています。

シニア Azure Databricks データエンジニア

AVANTTiのシニアデータエンジニアとして、Azure DatabricksのデータパイプラインとETL/ELTワークフローを構築します。 分析およびビジネスニーズに応える、拡張性の高いエンタープライズデータシステムを支援します。

仕事内容

  • Azure Databricks、PySpark、Azure Data Factory、Python、Azure Data Lakeを使用してデータパイプラインを構築・最適化します。
  • エンタープライズ統合と分析のためのETL/ELTワークフローを開発・保守します。
  • 複数のシステムからデータを取り込み、変換、検証、照合します。
  • データプロファイリングと分析を行い、品質上の問題を特定して一貫性と信頼性を確保します。
  • 効率的なデータ処理のため、複雑なSQLクエリを作成・チューニングします。
  • 大規模なワークロードの問題を調査し、パフォーマンスを改善します。
  • Azure Data Factoryのパイプライン、Databricksジョブ、データワークフローに影響するレベル2の本番インシデントに対応します。
  • 本番パイプラインを監視・サポートし、可用性、拡張性、運用効率を維持します。
  • 開発、ステージング、本番環境へのデプロイとリリースを支援します。
  • 複数プロジェクトの優先順位を調整し、自律的に業務を進め、期限を守ります。

応募要件

  • データエンジニアリングの経験が8年以上あること。
  • データエンジニアリングおよびETL開発の実務経験があること。
  • Azure DatabricksおよびAzure Data Factory (ADF) の実践的な経験が豊富であること。
  • 高度なETL/ELT開発およびデータ変換スキルがあること。
  • 複雑なクエリの作成、最適化、チューニングを含む高度なSQLスキルがあること。
  • PythonおよびPySparkの経験があること。
  • Azure Data Lakeおよびエンタープライズデータ統合の経験があること。
  • データ分析、検証、プロファイリング、品質保証の経験があること。
  • 本番パイプラインのサポート、監視、トラブルシューティングの経験があること。
  • 自律的に業務を進め、整理整頓し、優先順位を管理できること。
  • 口頭および書面での優れたコミュニケーション能力があること。
  • 高度な英語力があること。
  • 歓迎条件:CI/CDパイプラインおよびDevOpsの実務経験。
  • 歓迎条件:Git、Azure DevOps、または同等のバージョン管理・デプロイツールの知識。
  • 歓迎条件:クラウド監視、ログ、オブザーバビリティツールの知識。

福利厚生

  • CLT契約での雇用。
  • 完全リモート勤務。

関連求人

Hitss Brasil

ミッドレベル クラウドアーキテクト—Kubernetes・OpenShift

Hitss Brasil

Hitss Brasil のクラウドおよびコンテナ環境を支援し、Kubernetes と Red Hat OpenShift を中心に担当します。 プラットフォームのアーキテクチャ標準を定め、Ansible で設定を自動化し、安定した運用を支えます。

開く