Clouderaは、組織がハイブリッド環境全体でデータを管理、ガバナンス、分析できるよう支援するエンタープライズデータクラウド企業です。同社のプラットフォームは、オープンなデータレイクハウス、データメッシュ、統合データファブリックなどの最新のデータアーキテクチャに対応し、人工知能、機械学習、データエンジニアリングの機能を提供しています。Clouderaは金融サービス、通信、ヘルスケア、物流などの分野にサービスを提供し、チームが大規模なデータを活用して、複雑な情報を業務上の洞察へと変えられるよう支援しています。
GraphRAGエンジニア - Clouderaスペイン・リモート
Neo4j、ベクトルストレージ、自動取り込みパイプラインを横断して、ClouderaのエンタープライズAIナレッジグラフとGraphRAG機能を構築します。開発者ワークフローとエンタープライズAIサービスを支えるAWSおよびGCPインフラを運用します。
仕事内容
- 本番環境のNeo4jグラフデータベースとpgvectorストレージクラスターを構築、最適化、サポートする
- 高スループットのインデックス、コサイン類似度検索、クエリを設計・改善し、サブ秒の性能を実現する
- Gitリポジトリ、AST、Jiraリンク、Avroスキーマ、CI/CDメタデータをエンタープライズナレッジグラフに変換する取り込みパイプラインを開発する
- SQL、Cypherトラバーサル、密ベクトル埋め込みを用いて、分散パイプラインエンジンをハイブリッド検索システムに接続する
- 自律エージェント向けにサーキットブレーカー、信頼度しきい値、実行制限を設定する
- マイクロサービスとナレッジリポジトリをEnterprise AI Gatewayに統合する
- ローカライズされた.ai/ディレクトリ内のバージョン管理されたプロンプト構造を管理し、DLP、PII除去、トークンレート制御を適用する
- AWSとGCP全体でフェイルオーバー、バックアップ復旧、マルチクラウドストレージコスト管理を自動化する
- コンテキストエンジン、エンタープライズAIユーティリティ、Internal Developer Portalを支えるセマンティック、ベクトル、グラフストレージ層を担当する
- CABコンプライアンス、コードとスキーマのリネージ、エンタープライズLLMプロキシ統合に対応するSDLC Context GraphとGraphRAG Engineの提供を主導する
応募要件
- Cypher、APOC、因果クラスタリングを含むNeo4jの開発・運用、または同等のエンタープライズナレッジグラフシステムに関する豊富な実務経験
- pgvectorとPostgreSQL、埋め込み管理、ハイブリッド検索、LangChain、LlamaIndex、またはカスタムRAGパイプライン統合に関する確かな専門知識
- AWSおよびGCP環境でリレーショナルデータベースとグラフデータベースを管理した実務経験
- Apache Avroペイロードを扱い、AWS MSK経由でKafkaイベントを処理し、構造化または非構造化のコードおよびJSON成果物を解析できること
- Prompts-as-Code、few-shotプロンプト改善、エージェントツール仕様に関する実務知識
- Terraformのインフラストラクチャプリミティブ、EKSまたはGKE上のKubernetes、Docker、プル型GitOpsプロセスの経験
- HashiCorp Vault Transit暗号化、OIDCキーレス認証、ゼロトラストワークロードIDに関する知識
- DatadogまたはGrafanaでベクトル検索レイテンシーとLLM推論性能を測定するためのOpenTelemetry計装を理解していること
福利厚生
- 充実した有給休暇
- ワークライフバランスを支えるアンプラグドデー
- 柔軟な在宅勤務制度
- 心身のウェルネスプログラム
- 電話・インターネット費用の補助
- 継続的なキャリア開発機会
- 競争力のある総合的な福利厚生
- 有給のボランティア休暇
- 従業員リソースグループ
