【ミッション】
生成AIを活用した顧客向けプロダクト・システムにおいて、品質基準、テスト戦略、リリース判定の仕組みを設計し、開発チームや外部パートナーと連携しながら、顧客が安心して継続利用できる品質を実現することがミッションです。
生成AI特有の非決定性や誤情報、情報漏えいなどのリスクを検証可能な形に落とし込み、品質を客観的に評価・判断できる仕組みを構築します。
単にテストの実行や進捗を管理するのではなく、「何をもって品質とするか」を定義し、企画・要件定義・開発からリリース後まで、一貫して品質保証をリードする役割を担います。
　
【主な業務】
・Crystal Intelligenceを含む生成AIプロダクト、および顧客向けシステムにおけるQA戦略、品質基準、テスト方針、リリース判定基準の策定
・案件ごとの品質リスクを踏まえたテスト計画・テスト設計のレビュー、品質状況の可視化、リリース可否の判断
・生成AIの出力品質を含む、機能・性能・セキュリティなどを横断した品質評価・検証方針の設計
・開発部門、プロダクト部門、ビジネス部門と連携した、企画・要件定義段階からの品質要件・受入基準の明確化
・外部のテスト／QAパートナーの選定、役割設計、成果物レビューおよび品質管理
・テスト自動化や品質評価の標準化を通じた、効率的かつ再現性の高い品質保証プロセスの構築・改善
・不具合や品質リスクを踏まえた関係者とのリリース判断、および継続的な品質改善の推進
　
【具体的な業務】
・要求仕様や顧客ユースケースを分析し、品質リスクを特定したうえで、テスト範囲、優先順位、カバレッジ、開始・終了基準などを策定する
・仕様や期待値が曖昧な案件について、プロダクト・開発・ビジネス部門と調整し、検証可能な品質要件や受入基準へ落とし込む
・生成AIの回答について、正確性、事実性、安全性、一貫性などを評価するための評価データセット、QAセット、評価基準を設計する
・誤情報、情報漏えい、権限制御上の問題、想定外の応答など、生成AIを活用するシステム特有の品質リスクを想定した検証方針を策定する
・機能テスト、回帰テスト、性能テスト、セキュリティテストなどについて、案件特性やリスクに応じたテスト設計を行い、外部パートナーが作成したテスト計画、テストケース、テスト結果をレビューする
・テスト業務を委託するパートナーについて、案件特性に応じた選定・役割分担を行い、成果物の妥当性や品質を判断する
・テスト自動化や品質チェックの標準化を推進し、継続的かつ再現性のある品質評価の仕組みを整備する
・不具合や品質課題の重要度・優先度を整理し、開発部門と対応方針を協議するとともに、品質メトリクスや残存リスクをもとにリリース可否の判断を主導する
・本番環境で得られた不具合情報やユーザーフィードバックを検証項目へ反映し、継続的な品質改善サイクルを構築する
　
【仕事の魅力】
・生成AIを活用した顧客向けプロダクト・システムにおいて、企画・開発段階から品質保証に関わり、QA戦略や品質基準、リリース判定の仕組みそのものを設計できます
・従来型のソフトウェアテストに加え、生成AI特有の非決定性や誤情報、安全性など、まだ確立された正解の少ない領域で品質保証の実践知を積むことができます
・テスト実行や進捗管理だけではなく、「どこまで検証すればリリースできるか」「残存する品質リスクをどう判断するか」といった、プロダクトの意思決定に踏み込むことができます
・開発・プロダクト・ビジネス部門や外部のQAパートナーなど、多様な関係者を巻き込みながら、案件全体の品質をリードする経験を積むことができます
・個別案件への対応にとどまらず、テスト設計、評価方法、自動化などの知見を蓄積・標準化し、今後拡大していく生成AIプロダクトの品質保証のあり方を形づくることができます

■必須条件
・ソフトウェアQA／テストに関する実務経験
・QAリード、テストリード、テストマネージャーなどとして、案件の品質保証またはテスト活動を主体的に推進した経験
・要求仕様やユーザーユースケースをもとに品質リスクを整理し、テスト戦略、テスト計画、テスト観点を設計した経験
・Webシステム、クラウドサービス、APIなどを対象とした、機能テスト、E2Eテスト、回帰テスト、非機能テストに関する知識・経験
・不具合、テスト結果、品質メトリクスなどをもとに品質状況を評価し、開発チームや関係者と対応方針を協議・判断した経験
・開発部門、プロダクト部門、ビジネス部門など、複数のステークホルダーとの調整・合意形成を行った経験
・仕様や期待値が十分に定まっていない状況から、検証可能な品質要件や受入基準を整理できる力

■求める人物像
・決められたテストを実行するだけではなく、「このプロダクトにとって何をもって品質とするか」を自ら考え、検証方法へ落とし込める方
・仕様や正解が明確でない状況でも、顧客影響や事業リスクを整理し、現実的な品質基準や判断軸をつくれる方
・外部パートナーから提示されたテスト計画や成果物をそのまま受け入れるのではなく、品質・リスクの観点から妥当性を判断し、必要な改善を求められる方
・不具合の検出だけをゴールとせず、原因や影響範囲を整理し、開発チームと継続的な品質改善につなげられる方
・品質とリリーススピードを二者択一で考えず、リスクの大きさに応じて優先順位をつけ、関係者と合意形成しながら判断できる方
・生成AIなど変化の速い技術領域に関心を持ち、新しい品質リスクや評価手法を継続的に学び、実務へ取り入れられる方
・計画や管理だけに閉じず、必要な場面では自らテスト設計や技術的な検証にも踏み込み、実態を把握したうえで判断できる方

■歓迎要件
・生成AI／LLM／RAG／AIエージェントを活用したプロダクト・システムのQAまたは評価経験
・生成AIの回答品質を評価するための評価データセット、Evals、ベンチマークなどの設計・運用経験
・Python、JavaScript／TypeScriptなどを用いたAPI／UIテスト自動化の経験
・CI/CDへの自動テストや品質チェックの組み込み、品質ゲートの設計経験
・テストベンダーやQAパートナーの選定、発注、成果物レビュー、品質管理などの経験
・性能・負荷・信頼性テスト、SRE、可観測性などに関する知識・経験
・AIセキュリティ、プロンプトインジェクション対策、レッドチーミング、プライバシー、データガバナンスなどに関する知識
・JSTQB Advanced Levelなどの資格、またはソフトウェアテスト・品質保証に関する体系的な知識
・海外の技術チームやパートナーとの協働に必要な英語力