【CTO直下｜フルリモ可｜年収800〜1200万】AIエージェントの"正解"を定義する！品質戦略を0からつくるQAリード募集！

仕事内容

◢◤こんなモヤモヤ、ありませんか？◢◤ ・仕様が固まった後に呼ばれ、決められた観点で確認するだけ ・リリース前の「テスター」として扱われている ・本当に品質を左右するのは「何を作るか」「何が正しいか」の定義なのに、そこには関われない このポジションは違います。 担っていただくのは、テストの実行ではなく「何が正しいか」を決めること。 企画・要件定義の段階からPdM・エンジニアと並走し、CTO直下でプロダクトの品質そのものを設計していただきます。 テスト戦略も、自動化基盤も、品質指標も、まだ決まった型はありません。初期コアメンバーとして、QAのあり方そのものをゼロからつくれる環境です。 なぜQAがそこまで踏み込むのか。 それは、私たちのプロダクトが「正解」を定義しなければ品質を語れない、AIエージェントだからです。 ◢◤bellSalesAIとは◢◤ 商談の会話からSalesforceに入力すべきデータを抽出し、CRMの項目に合わせて構造化して自動入力するAIエージェントです。 「この発言は、この項目に、この値で入るべきか」。その"正解"を定義できる人が、プロダクトの品質を決めます。 私たちが求めているのは、テストを実行する人ではありません。 要件を誰よりも深く理解し、「このプロダクトにとっての品質とは何か」を定義し、それを仕組みで担保する人です。 CTO直下のQAリードとして、テスト戦略の設計、自動化基盤の構築、AI出力の評価設計まで、初期コアメンバーとしてゼロから形にしていただきます。 ◢◤具体的にお任せすること◢◤ ▼要件・仕様への関与（シフトレフト） ・企画・要件定義の段階からPdM・エンジニアと並走し、仕様の曖昧さ・矛盾・考慮漏れを開発前に解消 ・受け入れ条件の定義と、仕様の"正"となるドキュメントの整備 ・金融機関の営業業務やSalesforceの運用実態を踏まえた、顧客視点の品質要求の言語化 ▼テスト戦略・テスト設計 ・テストレベル、テストピラミッド、リスクベースの優先度付けを含むテスト戦略の策定 ・新機能のテスト計画・設計・実施、リリース判定基準の策定と運用 ・Managed Packageのアップグレード／後方互換性、権限・共有設定、顧客組織ごとのカスタマイズ差分を踏まえたテスト設計 ▼テスト自動化・CI/CD ・E2E／API／回帰テストの自動化基盤の設計・構築・運用 ・CI/CDパイプラインへのテスト組み込み、テストデータ・テスト環境（Sandbox／Scratch Org等）の整備 ・開発者がテストを書きやすい仕組みづくり ▼AIエージェントの品質評価 ・抽出精度を測る評価データセット（正解データ）の設計・整備、LLM-as-a-Judge評価の自動化 ・プロンプト・モデル変更時の回帰評価 ・精度や失敗パターンの分析と、PdM・エンジニアへの改善提案 ▼品質の可視化・プロセス改善 ・不具合・問い合わせ・本番ログの分析による品質指標の設計と可視化 ・障害の原因分析から再発防止までの仕組み化 ・生成AIを活用したテスト設計・実装の効率化 ◢◤このポジションの魅力◢◤ ◎「正解を定義する」QA 同じ「検討します」でも、文脈によって前向きな検討なのか断り文句なのかが変わります。それをSalesforceのどの項目に、どの値で入れるべきか。この正解データを作る力がプロダクトの競争力の源泉であり、その中心にQAが立ちます。 ◎品質の仕組みを、ゼロから設計できる 既存の運用を回すのではなく、テスト戦略・自動化基盤・品質指標・リリースプロセスそのものを設計していただきます。来年度以降のチーム拡大に向けた、QA体制づくりにも関われます。 ◎CTO直下で、意思決定に関われる CTO・CPOと直接議論しながら、品質に関する意思決定をリードできます。 ◎フルリモート可・フレックスタイム制 居住地を問わず、柔軟に働けます。