DysrupITは、組織のテクノロジー近代化と「サービスとしての運用モデル」への移行を支援する、クラウドサービスおよびITソリューション企業です。エンタープライズクラウド、マネージドサービス、アプリケーションエンジニアリング、サイバーセキュリティ、データ分析・情報管理まで幅広い分野で、中小規模の組織から多国籍企業までを支援しています。Microsoftをはじめとする各種クラウドプラットフォームと連携し、技術提供に人材育成、地域社会への貢献、長期的なパートナーシップを組み合わせ、ビジネスニーズに適合した安全で拡張性の高いテクノロジー環境を構築しています。
シニアデータエンジニア、GCP財務データパイプライン
監査可能な Google Cloud の財務・請求・請求書発行データパイプラインを構築します。 BigQuery、Python、SQL、データ品質管理を活用し、正確な照合を支えます。
仕事内容
- 財務および請求データ向けの GCP 取り込みパイプラインを構築・保守します。
- ネストされた ARRAY/STRUCT テーブル、パーティショニング、クラスタリングを用いて BigQuery モデルを開発します。
- ソース、ステージング、出力の各レイヤーに照合チェックを追加します。
- 受信ファイルを検証し、無効または不完全なデータを隔離します。
- 重複や破損を起こさず安全に再実行できる冪等なパイプラインを作成します。
- 監査可能性を支えるチェックとして、追記専用テーブルとビューを使用します。
- BigQuery NUMERIC 型と適切な丸め処理で金額を扱います。
- 料率、マッピング、顧客属性など、有効日を持つ参照データを管理します。
- 出力からソースデータまでのデータリネージを追跡します。
- pydantic と pytest を使い、型付けされ、保守しやすく、十分にテストされた Python コードを記述します。
- 変換、照合、レポート用の高度な SQL を開発・チューニングします。
- エンジニアリング、分析、財務の関係者と連携し、業務ルールを信頼性の高いデータロジックに落とし込みます。
- 同僚を指導し、データエンジニアリングの標準と実践の確立を支援します。
応募要件
- データエンジニアリングの実務経験が6年以上あること。
- すべての金額を照合できる必要がある財務または請求パイプラインを構築した実績があること。
- pydantic、型付きコード、pytest を含む高い Python スキルがあること。
- 複雑な結合、ウィンドウ関数、パフォーマンスチューニングを含む高度な SQL スキルがあること。
- ネストされた ARRAY/STRUCT テーブル、パーティショニング、クラスタリングを含む Google BigQuery の深い知識があること。
- NUMERIC データ型を使って金額を正確に扱った経験があること。
- 追記専用テーブルの設計と、ビューをデータチェックに使った経験があること。
- 照合チェック、ファイル検証、隔離処理など、データ品質の実践に関する深い知識があること。
- 安全に再実行できる冪等なパイプラインの構築経験があること。
- データリネージの実装と、有効日を持つ参照データの管理経験があること。
- クレジットノート、再請求、為替換算、月末締めを含む請求書発行の経験があること。
- 規制または監査対象の環境で、財務または請求チームと協働した経験があること。
- Cloud Storage、Cloud Run、Firestore など、他の GCP サービスの利用経験があること。
福利厚生
- 経験に応じた競争力のある報酬。
- 法令で定められた福利厚生。
- 追加の HMO 医療保障。
- 協力的でプロフェッショナルな職場環境。
- 成長中の組織でキャリアを伸ばす機会。
- 該当する場合、ハイブリッドまたはリモート勤務。
- 従業員の成長とキャリアアップを支援する研修。