Snowflakeデータエンジニア(主任・契約)—マンチェスター・ハイブリッド勤務
Insight Investmentのガバナンスが整ったSnowflakeデータプラットフォームを主導します。 データパイプライン、標準、分析機能を整え、AI活用を支えます。
仕事内容
- Snowflakeと関連ツールを用いた、堅牢で拡張性の高いデータプラットフォームの設計・構築を支援します。
- Insightのデータ戦略を推進し、その成果を経営層やデリバリーチームと共有します。
- データの取り込み、ガバナンス、変換、保存、アクセスに関する全社的な実践基準を定めます。
- ELTパイプラインのパフォーマンスを向上させます。
- 高度な分析ツールとAIツールを設定し、その活用を促進します。
- クラウドエンジニアリングチームと連携し、Infrastructure as Codeの活用を拡大します。
- 技術設計が社内のデータ、プライバシー、セキュリティ、コンプライアンス方針に準拠するようにします。
- Snowflakeとビッグデータ分野の動向を追い、有用な新技術を提案します。
- データプラットフォームチームで協力し、アジャイル手法を用いてクラウドソリューションを提供します。
- ビジネスチームと連携し、セキュアシステム開発ライフサイクル(S-SDLC)の全工程に貢献します。
応募要件
- Snowflakeの機能に関する知識(ウェアハウス、TasksとStreams、Snowpipe、Snowpark、分散UDFとストアドプロシージャ、Time Travel、クローンなど)。
- Snowparkによるエンドツーエンドのパイプライン提供経験。PySpark、Polars、Daskなど、応用可能なフレームワークの経験も対象です。
- Jinjaテンプレートを使用するDBT、または同等のデータ変換フレームワークの知識。
- ビルドツール、自動テストフレームワーク、適切なエンジニアリング手法を含むPythonの知識。
- Snowflake向けに最適化されたクエリを含むSQLの知識。
- CI/CDパイプラインの経験と、GitHub Actions、TeamCity、Artifactoryなどのツールの使用経験。
- 自発的かつ自立して問題を解決する力。
- 抽象的または複雑な考えや解決策を明確に伝える力。
- 適切なソフトウェアエンジニアリング原則を守り、高品質な成果を追求する姿勢。
- アジャイルチームで働き、反復的に成果を提供した経験。
- エンドユーザー、ステークホルダー、チーム、同僚と協力する力。
- 技術知識を広げ、新しい技術やアプローチの採用をチームに促す意欲。
- ミスに責任を持ち、同僚とともに対処して学び、継続的な改善につなげる姿勢。
- Docker。
- JavaまたはScala。
- Kafka、Pulsar、Azure Event Hubsなどを用いたイベントストリーミングの経験。
- Collibraとの連携経験。
- Apache Iceberg。
- Apache Arrow。
- PySpark。
- Snowflake AI、LangChain、LlamaIndex、Pineconeなどを用いたAIエンジニアリングの経験。
関連求人
求人が見つかりません
フィルターを調整またはクリアして、他の求人を探してみてください。
