コーデック変更前に実施したい比較試験｜音質・遅延・帯域をどう評価するか
コーデック変更の採否を、音質だけで決めないための比較試験を解説します。固定する条件、音声・遅延・帯域・負荷の評価項目、結果表、切り戻しまでを整理します。
テスト設計
音声ボットのテスト方法とは？認識・会話・応答音声を分けて確認
音声ボットは、文字のチャットに音を付けただけではありません。聞き取り、意味の理解、会話の進行、音声での応答という複数の段階があります。Botiumでの検証を考える際に、どこを分けて試すと原因を見つけやすいかを説明します。
AIエージェントは業務を完了できたか？Botiumで考える結果の検証
「予約しました」という返答があっても、予約システムに記録がなければ業務は完了していません。外部の機能を使って仕事を進めるAIエージェントでは、会話と実処理の両方を確かめます。BotiumのAgentic Testingを理解するための基本を説明します。
AIボットの安全性をどうテストする？情報漏えいと指示のすり替えへの備え
AIボットに業務情報や外部システムをつなぐと、回答の正しさに加えて、情報の扱いと操作権限の確認が必要になります。本記事では、権限を持つ自社の試験環境で行うことを前提に、安全性テストの基本を説明します。
生成AIボットの誤回答をどう見つける？根拠・回答・保留を分けるテスト
生成AIの回答は、読みやすくても根拠が正しいとは限りません。社内資料を検索して答えるRAGでも、必要な資料が見つからない場合や、資料にない条件を補ってしまう場合があります。誤回答を見つけるための試験設計を紹介します。
チャットボットの言い換えをどうテストする？意図理解と聞き返しの確認
「届く日を変えたい」と「配送予定を変更したい」は、同じ用件でも表現が異なります。一方で、似た言葉でも違う業務を指すことがあります。言い換え・意図の取り違え・聞き返しを分けて、ボットの理解を確認する方法を説明します。
チャットボットのテスト項目はどう作る？Botiumで始める試験設計
ボットのテストは、質問文を大量に並べるだけでは十分ではありません。「誰が、どの状態で、何を求め、何が起これば合格か」をそろえる必要があります。Botiumでの試験を始める前に使える、テストケースの作り方を紹介します。
Cyara Botiumとは？AI・チャットボットの品質を確かめる基本
AIボットが自然に返答しても、利用者の用件が解決したとは限りません。必要な条件を聞き漏らしたり、誤った窓口へ案内したりすることがあります。本記事ではCyara Botiumの位置づけと、導入前に整理したい品質確認の考え方を説明します。
Velocity導入前のチェックリスト｜対象範囲・テストデータ・保守体制
Velocityの導入効果を得るには、テストを実行する機能だけでなく、対象範囲とデータ、判定、保守担当を準備する必要があります。導入前に整理したい項目を、試行から継続運用までの順番でまとめます。
電話試験の期待結果をどう決める？案内・応答時間・転送先の判定
自動試験を実行できても、何を合格とするかが曖昧なら結果を信頼できません。Velocityで電話試験を設計する際は、案内の内容、操作への応答、到達先を、それぞれ判定できる形にします。ここでは期待結果を作る基本を説明します。