AI電話エージェントは、いつ話すのを止めるべきか?
ElevenLabsが発話の交代、割り込み、モデルの切り替えを扱うエンジンをプレビューした。予約変更を例に、会話全体の試し方を考える。
電話の自動応答が、木曜の朝の予約を読み上げ始める。発信者が口を挟む。「すみません、来週の木曜のつもりでした」。自然に話せるエージェントでも、古い確認をそのまま読み続けたり、発信者の話が終わる前に日付を変更したりすれば、やり取りは難しくなる。相手に発話を譲り、正しい状態を踏まえて話を再開できるかが問われる。
2026年11月11日、ElevenLabsはニューヨークのサミットでInteraction Engineをプレビューした。同社によると、発話の交代や割り込みを扱い、やり取りの場面に応じて異なる言語モデルを選べる。一次対応を低コストのモデルで行い、複雑な仕事に高性能なモデルを使う構成を説明した。サミットでの発表はプレビューで、一般提供日は示されていない。ElevenLabsサミットの発表
そこで、予約変更を使うとこの仕組みを具体的に評価できる。発信者の話を聞き、古い意図を新しい意図に置き換え、最終的な案内が予約システムと一致する必要がある。発話の間や重なりを検出するのは最初の段階だ。
適切に間を取ると、相手が最後まで話せる
エージェントの発話中に相手が声を出す理由は、少なくとも三つある。重要な点を訂正する、理解したと相づちを打つ、近くにいる人に話しかける。割り込みを検出するなら、実用上十分な頻度で区別したい。音がするたびに止まる仕組みは、一度なら反応がよくても、通話を通して使うと不安定に感じる。訂正されても話し続ければ、数秒で済むはずのことを説明し直すことになる。
予約の例を二通り聞いてみよう。新しい時間を読み上げる途中で発信者が「はい」と言うだけなら、そのまま続けられる。「待って、来週の木曜で、午後にしてほしい」と言われたら、古い案内を止め、週の変更と時間帯の希望の両方を聞き終える必要がある。次の応答に二つの変更が入っているかが成功の基準だ。
相手に発話を譲れば、訂正の内容を最後まで聞ける。Telli.sh作成。
電話音声では、その判断が難しくなる。日付を言う前に間が空いたり、言葉を探す声が入ったり、回線が途切れて同じ語句が繰り返されたりする。実際に使われるチャネルで試し、音声の条件を記録する。きれいなデモでは設計が可能か確かめられる。普段の雑音のある通話では、実際の発信者の割り込みに対応できるか確かめられる。
測るのは、相手に聞こえる音の時点から次の音の時点までだ。訂正が始まったとき、最初の意味のある音から、エージェントの声が実際に止まるまでを測る。回線ですでにバッファーに入った音声も含める。発信者の発話終了から、返答の役に立つ最初の言葉までの時間も測る。「少々お待ちください」とすぐ伝えれば長い照会も予想しやすいが、実際の答えが数秒後なら、別に数える。
通話の説明と予約の状態がずれることがある
割り込みの時点で、今週の木曜の空き枠を見つけただけだとする。古い候補を取り消し、来週の木曜を調べ、空いている時間を提案できる。一方で、別のシステムが日付の読み上げ前に「木曜で大丈夫です」と聞いて、すぐ変更を送ったとする。訂正の時には、古い変更が予約サービスに届いているかもしれない。音声を止めても、その変更は元に戻らない。
テストではこれらの状況を明示する。提案中の予約には、最新の日付と時刻の読み直しが必要になる。更新処理中なら、予約サービス側の処理結果を確認する。更新に成功していれば、現在の状態を説明し、承認された訂正手順に従う。失敗やタイムアウトなら、成功を伝えたり、もう一度更新したりする前に現在の状態を調べる。復旧方法は、既存の予約システムのルールに従う。
| 発信者の発話 | 期待する音声の動作 | 期待する予約の結果 |
|---|---|---|
| 読み上げ中に「はい」 | 発信者が話を引き取らない限り続ける | 追加の書き込みなし |
| 確定前に「待って、来週の木曜です」 | 古い読み上げを止め、訂正を最後まで聞く | 新しい日付の確認まで更新しない |
| 更新処理中の訂正 | 受け止めて結果を調べる | 次の操作の前に確認済みの状態を案内 |
| 担当者と話したい | 確認し、既存の引き継ぎ手順を始める | 現在の状態と未解決の依頼を引き継ぐ |
試すときは、架空の予約が入ったサンドボックスを使う。通話と予約操作の時系列を両方記録する。時刻の基準を合わせるか、ずれを明示する。音声では変更済みと聞こえたのにシステムに記録がない場面や、指示を取り消した後に書き込みが成功した場面を探す。挨拶が遅いのとは異なる不具合だ。
一回の発話の中でも、仕事に応じてモデルを選ぶ
ElevenLabsはこのプレビューを、会話の進行に合わせてモデルを選ぶ仕組みとして説明する。予約の通話なら具体的に考えられる。日程変更の意図を認識する、許可されたツールで記録を調べる、例外的な規定を解釈する、人への転送が必要かを判断する。それぞれに必要な推論の深さは異なる。普通の日付検索なら簡単でも、複数のサービスで異なる規定が関わる変更なら、詳しく判断するか、担当者につなぐ必要があるかもしれない。
作業の影響に応じて経路を分け、引き継ぎでも会話の状態を保つ。Telli.sh作成。
モデルの名前以上に大切なのは、経路が変わるときに何を渡すかだ。通常の依頼が複雑になったら、予約IDや現在の状態、未確認の点などを引き継ぐ。担当者につなぐ場合は、発信者の希望と完了済みの手順を短くまとめる。発信者が同じ説明を繰り返さずに済み、担当者は必要な確認を行える。
振り分けが間違う頻度も測る。たとえば「両方の予約を変更してください」なら、一件の日付を変えるのと異なる手順が必要かもしれない。承認を求める前に、二件とも把握できたか確認する。複雑な案件が一次対応から始まっても、十分な情報とともにすぐ引き継げば、問題なく復旧できる場合がある。古い予約と新しい予約の整合性が崩れるなら、安価な経路に送った判断が後工程の負担になる。
プレビューは、安価なモデルを一次対応に使えばトークン使用量が減る可能性を示している。コンタクトセンターの実費には、かけ直し、担当者への引き継ぎ、途中離脱も関わる。発生した人の対応を含め、正しく解決した一件あたりの費用で比べたい。40秒で終わっても、翌日かけ直す必要があるなら、費用が別のところに移っただけだ。
繰り返し使える小さな試験を作る
架空の木曜の予約を翌週に変更するなど、結果が決まっているケースから始める。想定する音声応答と予約システムの状態を記録する。確認前の割り込み、文の途中での訂正、短い相づちを加えた版も作る。意図的な沈黙も入れる。発信者が予定表を見るために黙っても、無関係な案内で急かされずに話を続けられる必要がある。
- 訂正が始まり、終わった時点と、エージェントの音声が実際に止まった時点を記録する。
- 訂正したすべての内容が返答に残っているか確かめる。言い直しが必要だった内容も記録する。
- 通話内容と予約システムの状態を比較する。重複更新、誤った日付、根拠のない完了案内を探す。
- 静かな環境と雑音がある環境で同じ台本を使い、数人の話者と複数の回線条件で試す。
- 完了率、確認済みの結果までの時間、振り分けエラーを実装間で比べる。
重要な失敗を拾える範囲にしつつ、確認者が一件ずつ聞ける規模にする。静かなやり取りで二つのシステムにわずかな時間差しかなければ、選ぶ前に影響の大きいケースを確認する。確実な予約確認や分かりやすい引き継ぎが、小さな時間差を上回ることもある。その時間差で発信者が二度口を挟む回数が変わるなら、同じ数値でも意味を持つ。
平均だけでなく、応答の遅いケースも測る
架空の通話を十件試したとする。九件では訂正をすぐ聞き取る。十件目では、発信者が長い案内に声を重ね、応答が止まるまで訂正を繰り返す。平均時間は妥当に見えても、信頼を損ねやすいのは最後の一件だ。個別事例を残し、件数が十分なら、時間の分布のうち遅い側も報告する。小規模な試験なら、実際の範囲を示し、最も遅い事例を聞く。
会話と無関係な音でも止まるなら、間が増えて改善したように見えてしまう。同じ背景の会話を、短い予約確認中と長い説明中に流す。誤停止の頻度と、意味の通る区切りで再開するかを調べる。同じ時点で、本当に訂正が入る通話も試す。二つを比べれば、反応がよいのか、過敏なのかを見分けられる。決まった「待って」だけでなく、実際の発信者が使う否定や訂正も含める。
結果ごとに、発信者がどんな負担を受けるか考える。軽い相づちで誤停止しても、短い間が増える程度かもしれない。訂正を聞き落とすと、どの日付が予約されたか分からなくなる。振り分けの誤りは、説明を繰り返す状況につながる。頻度と復旧の手間を表に並べれば、先に修正するものを選びやすい。引き継いだエージェントや担当者が、一から説明を求めずに現在の予約を案内できるかも試験に含めたい。
音声のタイミングはチャネルでも変わる。静かな部屋のブラウザー通話と、圧縮された携帯電話の通話では、発話交代について得られる情報が違う。録音した場所、スピーカーフォンの有無、時刻が発信者側で聞こえた音を指すか、サービス内部のイベントを指すかを記録する。新旧のシステムで同じ方法を使う。比較の目的は、発信者が違いに気づく場面を説明することだ。
広く導入する前に、少人数の確認者に、どのシステムが担当したか伏せて通話を評価してもらう。想定する予約結果を渡し、希望が理解されたか、訂正を繰り返したか、最後の案内は正しかったかを確認してもらう。その結果を予約の監査記録と照合する。自然に聞こえる応答と、正しく終わった作業の隔たりが見えることがある。
ElevenLabsは音声とチャットのエージェントを設定・運用するElevenAgentsをすでに提供している。サミットの記事はInteraction Engineを別のプレビューとして扱い、ほかの発表機能についても個別の日程を説明している。ここで提案した試験は現在の音声基盤でも使え、プレビュー機能が利用できるようになったら繰り返せる。同じ通話台本と期待結果を比較に使える。ElevenLabsサミットとプラットフォームの発表
台本どおりの通話より、途中で訂正する通話を試す
発信者が文の途中で希望を変え、新しい内容を聞き、その予約が正しく登録されていれば、システム全体で日常の会話に対応できたことになる。発信者が台本どおりに話したときに音声が自然に聞こえるかを測るより、実際の利用に近い目標だ。
出典
顧客との通話や確認会のメモを検索できる形に整理するには、Telli.shアカウントを作成。