Sigma Software Groupは、2002年に設立された多国籍のテクノロジーコンサルティング企業です。同社のチームは、自動車、ヘルスケア、通信、航空、銀行、ゲーム、不動産、広告などの分野の顧客に、ソフトウェア開発、グラフィックデザイン、テスト、テクニカルサポートを提供しています。ITスペシャリストを採用し、複雑なエンジニアリングプロジェクトに携わる機会を提供するとともに、メンタリングや継続的な学習を通じて専門能力の向上を支援しています。リモートワークは同社の働き方の一部であり、アストラゼネカ、スカニア、SASなどの組織向けのプロジェクトに取り組んでいます。
シニアデータエンジニア
クラウドネイティブなデータプラットフォームとニアリアルタイムのパイプラインを構築し、Spark と PySpark のワークロードを刷新します。 AI ツールとエージェント型ワークフローの導入を推進し、技術研究開発にも貢献します。
仕事内容
- 初期設計から本番稼働まで、スケーラブルなクラウドネイティブデータプラットフォームを構築します。
- イベント駆動型のパターンを用いて、ニアリアルタイムのデータ取り込みパイプラインを開発します。
- データレイク、レイクハウス、メダリオンアーキテクチャ、データコントラクトのプラットフォーム標準を定め、維持します。
- Spark と PySpark のスクリプトを改善し、性能と保守性を高めます。
- データパイプライン全体で、コード品質、テスト、CI/CD の実践を確立します。
- データエンジニアリングチームで AI ツールとエージェント型ワークフローの活用を推進します。
- プラットフォームとパイプライン全体のデータ品質、可観測性、拡張性、信頼性を維持します。
- プラットフォームを使いやすくするセルフサービスツールとマイクロサービスを作成します。
- プロダクト、機械学習、データサイエンスの各チームと協力します。
- アーキテクチャの意思決定や技術研究開発に貢献します。
応募要件
- データエンジニアとして5年以上の実務経験があること。
- Python と SQL の開発スキルに優れていること。
- Apache Spark と PySpark の実務経験があり、クエリ最適化と性能チューニングができること。
- Databricks または Snowflake の経験があること。
- Azure、AWS、GCP のうち、少なくとも1つの主要クラウドプロバイダーで実務経験があること。
- Kafka や Spark Structured Streaming などのストリーム処理ツールの経験があること。
- ETL/ELT パターン、データモデリング、データウェアハウスを理解していること。
- Apache Airflow や Azure Data Factory などのオーケストレーションツールを使用した経験があること。
- Terraform などの Infrastructure as Code ツールに関する知識があること。
- 可観測性、拡張性、信頼性、性能など、本番システムを理解していること。
- 技術的な取り組みを構想から実現まで自立して主導できること。
- 効果的にコミュニケーションを取り、協力できること。
- 英語力が中上級以上であること。
福利厚生
- リモート勤務が可能です。
