外部文章を「命令」として扱わないか
文書、検索結果、RAG参照情報などを介した指示混線を確認します。
外部文書・参照データ・複数ステップ・ツール実行をまたぐ挙動を、 日本語40ケースで固定評価。再現条件と改善観点を3日でレポートします。
「回答できるか」ではなく、外部情報・文脈・権限・出力先が混ざったときに、 想定した境界を維持できるかを固定ケースで確認します。
文書、検索結果、RAG参照情報などを介した指示混線を確認します。
複数ターン・複数処理をまたいだ際の命令関係を確認します。
ツール権限、実行主体、依頼者の境界に関わる挙動を確認します。
入力・参照情報と、生成・外部化される情報の関係を確認します。
対象範囲を固定し、40ケースを実行。 観測結果を再確認できる形に整理します。
評価対象・許可環境・データ範囲・実行可能な操作を文章で確認します。
ケースごとに入力条件、観測挙動、再現条件を記録します。
再現率、観測挙動、想定影響、追加評価・改善の観点を整理します。
抽象的な所感ではなく、入力条件・再現手順・再現率・観測挙動・ 期待される境界・影響・次の評価観点をケース単位で整理します。
評価は、依頼者が指定または書面で許可した環境に限定します。 対象製品、利用可能な機能、入力データ、実行可能な操作を 事前に文章で固定した上で開始します。
本サービスはセキュリティ認証または一般的なペネトレーションテストの代替ではありません。 また、問題や脆弱性の発見自体を保証するものではありません。
AIエージェントの業務フローを評価するための、 日本語評価ケースと評価仕様を体系化。 自社製品の検証から顧客案件への組み込みまで、 利用範囲に応じたライセンスを提供します。
自社製品・自社環境の評価向け。 100ケースの評価仕様を、自社のAIエージェントやAI業務フローの検証に利用できます。
品質保証、検証、コンサルティング等の顧客案件への組み込み向け。 顧客向け成果物でJentraxisの名称表示は不要です。
評価対象になるかどうかは、 製品名と現在の機能構成を文章で確認して判断します。 通話は不要です。
対象範囲の確認は原則文章で行います。