YASH Technologiesは、組織の業務 modernize と生産性向上を支援するグローバルなテクノロジーサービスおよびアウトソーシング企業です。デジタルトランスフォーメーション、人工知能と自動化、クラウドサービス、サイバーセキュリティ、IoT、アプリケーション管理、エンタープライズコンサルティングなど、幅広い分野で事業を展開しています。また、SAP導入やクラウド変革の取り組みも支援し、コンサルティング、ヘルスケア、物流などの業界にサービスを提供しています。各チームは、実際のビジネス成果と顧客の成功を重視し、顧客ごとに最適化したテクノロジーソリューションを提供しています。
PySparkデータエンジニア
YASH Technologiesで、拡張性の高いPySparkデータパイプラインを構築します。Microsoft Fabric、Spark SQL、Lakehouse、Data Factoryを使用してETL/ELTワークフローを開発します。
仕事内容
- Microsoft FabricでPySparkを使用し、拡張性の高いデータ処理ソリューションを作成する
- 大規模な構造化データおよび半構造化データ向けのETL/ELTパイプラインを構築・改善する
- Fabric Notebooks、Lakehouse、Data Factory Pipelinesを使用して、データの取り込み、変換、集計のワークフローを開発する
応募要件
- 関連分野で3～5年の経験があること
- PySparkを使用してMicrosoft Fabricで拡張性の高いデータ処理ソリューションを設計・開発すること
- 大規模な構造化データおよび半構造化データ向けのETL/ELTパイプラインを構築・最適化すること
- Spark DataFramesおよびSpark SQLを使用すること
- Fabric Notebooks、Lakehouse、Data Factory Pipelinesを使用して、データの取り込み、変換、集計のワークフローを開発すること
福利厚生
- 柔軟な働き方
- 包摂的なチーム環境
- キャリア形成を重視したスキル開発モデル
- 継続的に学び、知識を更新し、新たに学び直す機会
- 安定した雇用
- 温かく迎え入れる職場の雰囲気
- 倫理を重んじる企業文化
