シニアデータエンジニア(中番、フィリピン、リモート)
Shore360向けにAWSとSnowflakeのデータプラットフォームを構築します。Shore360はオーストラリア資本のフィリピンの人材・事務支援企業です。 信頼性の高いパイプライン、API、データ品質管理を開発します。
仕事内容
- AWSとSnowflakeを使用し、データの取り込み、変換、配信を行う本番データパイプラインを構築・最適化します。
- 変更データキャプチャ(CDC)パイプラインを実装し、アプリケーションデータベースや外部ソースのスキーマ変更を管理します。
- エラー処理、再試行、監視、アラート、運用ドキュメントを含むワークフローのオーケストレーションを維持します。
- 自動化されたデータ品質チェックと管理策を設定します。
- メダリオンアーキテクチャのブロンズ、シルバー、ゴールド各レイヤーを設計・保守します。
- AWSとSnowflake全体で、ストレージ、パーティション、クエリ性能、クラウドリソースの使用状況を改善します。
- 社内外のユーザー向けに、安全でバージョン管理されたAPIとデータフィードを開発します。
- CI/CDパイプライン、TerraformによるInfrastructure as Code、環境管理に貢献します。
- データリネージ、アクセス制御、オーナーシップ、ビジネス用語集を整備し、データカタログを支援します。
- データアーキテクトや関係者と連携し、プラットフォーム標準を適用してデータ利用ニーズに対応します。
- 技術文書、データフロー記録、運用手順書を維持します。
- 機密情報を保護しながら、生産性、コード品質、デリバリーの向上に向けてAI支援開発ツールを責任を持って活用します。
応募要件
- コンピューターサイエンス、工学、情報技術、または関連分野の学位、あるいは同等の実務経験。
- 通常、データエンジニアリングで5年以上の経験、または信頼性の高い本番環境向けクラウドデータソリューションを提供した実績。
- データエンジニアリングと変換に必要なPythonおよびSQLの高いスキル。
- AWSサービスの実務経験。特にS3、DMS、Lambda、Step Functionsの経験。
- SQL、Python、Tasks、ロールベースのアクセス制御、データカタログ化、データ品質管理を含むSnowflakeの実務経験。
- CDCパイプラインの実装とスキーマ変更管理の経験。
- 自動化されたデータ品質チェックと管理策の作成経験。
- メダリオンアーキテクチャとディメンショナルデータモデリングの知識。
- API開発、およびAPI Gateway、Lambda、REST APIを使った安全なデータ配信の知識。
- CI/CD、Terraform、Git、CloudWatchの知識。
- AI支援エンジニアリングツールの使用経験。生成された出力の検証と機密データの保護を含みます。
- 問題解決力と細部への注意力があり、信頼性と拡張性に優れたデータソリューションを重視できること。
- 優れた英語の読み書き・会話能力、明確な非同期コミュニケーション能力、分散チームで協働する能力。
- データのプライバシー、セキュリティ、ガバナンスに関する深い知識。特に金融サービス分野の知識。
- 歓迎:金融サービスまたは投資運用の経験。特に資産運用会社、ファンド、投資データの経験。
- 歓迎:リモートまたは分散チームでの業務経験。
- 歓迎:Snowflakeでの分析ソリューションまたはAI支援ソリューションの経験。
- Microsoft 365、Salesforce、eVestment、FactSet、Preqin、Windows、Linuxに関する知識。
福利厚生
- 初日からHMO医療保障を利用できます。
- 各シフトを通じてバリスタコーヒーを無制限で楽しめます。
- 無料駐車場とシャトルサービスがあります。
- 休憩やレクリエーションに利用できるプレミアムゲームラウンジがあります。
- 写真、ダンス、フィットネス、読書、音楽のソーシャルクラブがあります。
- 毎月、チーム活動や記念イベントを実施し、賞品や報奨を提供します。
- 新しい人材をチームに紹介すると紹介報奨を受け取れます。
- 法定福利厚生には、産前産後休暇、父親休暇、単独親休暇、女性憲章に基づく福利厚生、時間外勤務手当、割増賃金が含まれます。
- ブロンズレベルの従業員紹介報奨があります。
関連求人
求人が見つかりません
フィルターを調整またはクリアして、他の求人を探してみてください。
