
シニアデータエンジニア(Scala、Spark、Python)– TD、トロント・ハイブリッド勤務
TD証券のシニアデータエンジニアとして、資本市場のリスクプラットフォームを支援します。Scala、Python、Sparkを使って、スケーラブルなリアルタイムデータシステムと分析基盤を構築・運用します。
仕事内容
- Scala、Python、Apache Sparkを使用して分散データ処理システムを設計する
- 大規模なバッチおよびストリーミングSparkパイプラインを開発・最適化する
- データサイエンティスト、アナリスト、ステークホルダーのデータニーズを効果的なソリューションに変換する
- Scala、Spark、PySpark、Akka/Pekkoを使用したリアルタイム処理システムを維持する
- 複数のソースからデータを変換・統合するETLワークフローを作成・支援する
- 信用リスク、カウンターパーティー信用リスク、XVA、規制報告向けのデータプラットフォームを支援する
- Databricks Unity Catalog、データリネージ、分類、アクセスガバナンスの実務を適用する
- FpML、金融商品モデリング、資本市場の参照データ標準を使用する
- 自動テストと監視を通じて、データの品質、信頼性、完全性を守る
- DevOpsチームと連携し、CI/CDおよびクラウドベースのデータパイプラインをデプロイ・運用する
- ジョブの最適化とチューニングにより、Sparkの性能とスケーラビリティを向上させる
- コードレビューに貢献し、エンジニアリングプラクティスを強化する
- 進化するデータエンジニアリングのツールと手法を継続的に学ぶ
- 技術系・非技術系の同僚と効果的にコミュニケーションする
- ビジネスチームとテクノロジーチームの強固な協力関係を築き、生産性と業務効率を向上させる
応募要件
- コンピューターサイエンス、工学、または関連分野の学士号または修士号
- Python、Scala、Sparkを中心とするデータエンジニアリングの実務経験5年以上
- データウェアハウス、データモデリング、ETLの実務に関する確かな知識
- Azure ADLS、Azure Databricks、Dremioの実務経験
- Hadoop、Kafka、Hive、HBaseの実務経験
- Akka/Pekkoを使用した分散システム構築の実務経験
- RESTおよびgRPC通信プロトコルの理解
- 高度なSQLスキルと、リレーショナルおよびNoSQLデータベースの経験
- GCPまたはAzure、およびDockerまたはKubernetesの経験があれば尚可
- Apache KafkaまたはConfluentの経験があれば尚可
- Excelアドイン開発におけるC#の熟練度
- CI/CDパイプラインの構築およびInfrastructure as Codeの使用経験
- データガバナンスとセキュリティプラクティスに関する知識
- 機械学習とデータサイエンスのワークフローに関する知識
- リアルタイム分析とイベント駆動アーキテクチャの経験
- 高い問題解決能力があり、単独でも協働でも業務を進められること
- 明確なコミュニケーション能力と部門横断で働いた経験
- グローバルチームと効果的に協働できることを実証していること
- 変化するビジネス優先事項に適応しながら、スピード感のある環境で成果を上げた経験
- デリバティブ価格評価と資本市場に関する知識があれば尚可
福利厚生
- 会社および個人の業績に連動する裁量型変動報酬
- 健康・ウェルネス福利厚生
- 貯蓄および退職制度
- 有給休暇
- 銀行サービスの福利厚生と割引
- キャリア開発機会
- 報奨・表彰制度
- 継続的な能力開発面談、研修、オンライン学習プラットフォームの利用
- メンタリング制度
- 研修・オンボーディングセッション
- アクセシブルな会議室やオンライン面接での字幕などの職場環境配慮
関連求人



ハイブリッドクラウドインフラエンジニア
Tyfali Consulting大手国際グループの VMware、Kubernetes、AWS 環境を近代化します。 Terraform でインフラを自動化し、Linux のセキュリティを強化しながら重要なプラットフォームを運用します。
開く

シニア機密ネットワーク運用クラウドエンジニア – HPE
Hewlett Packard EnterpriseHPEでは、機密および非機密のプライベートクラウド環境を支援するシニアネットワーク運用エンジニアを募集しています。VMware NSX、連邦政府機関の顧客ネットワーク、およびSecretクリアランスを要する運用を担当します。
開く

シニアDevOpsエンジニア
Element 84シニアDevOpsエンジニアとして、安全なAWSおよびAzureのクラウドインフラと自動化を設計します。 Element 84の地理空間、地球科学、生成AIシステムを支援します。
開く





