今週の一問: サポート品質の評価をAIに全件任せてよいのか?「完全自動化の罠」を防ぐ現実的なハイブリッド運用とは?
ZendeskのAutoQAは、AIによって対話の100%を評価できる機能をうたっています。一方でCX Collectiveの創業者Ty Givenは、CX Todayのインタビューで、支援チームのリーダーが実際に評価できているのは顧客とのやり取りのごく一部にとどまることが多いと指摘しました。AIツールは会話の解析を助けてくれるものの、ニュアンスの判断には依然として人間が関わる必要があるといいます。
Givenの主張はシンプルです。AIツールは会話の解析を助けてくれるものの、文脈やニュアンスの判断には依然として苦戦している。だからこそ文脈を読み、コーチングすべき点を見極める作業は、最終的に人間が担う必要があると述べています。CX Collectiveが提示する「Quality as a Service」は、QAツールを自社で購入・学習・導入・運用するという一連の作業をチームに背負わせるのではなく、品質プログラムそのものを外部から組み立てて精査済みの結果だけを届けるモデルです。月次のキャリブレーションセッション、人間による審査、エージェントからの異議申し立てワークフロー、コーチングノートといった仕組みを提供し、リーダーとエージェントが次の行動に移せる形へ整えるとされています。Givenはこのモデルが特にエージェント数5人から20人規模のチームで有効だと述べており、急成長しているものの内部にQAの専門知識を持つ余裕がない組織を想定しています。
一方でZendeskが提供するAutoQAは、AIによって対話の100%を評価できる点を軸に据えています。抜き取りによる主観的なサンプリングを、標準化された指標に置き換えるという発想です。全件評価という到達点そのものは、CX Collectiveの記事とも矛盾しません。問題は、全件評価が実現した先で何が起きるかです。
metricsherpa.comの論考は、自動化されたQAが「コンプライアンスのチェック」に落ち着いてしまう危うさを指摘しています。台本通りに必要事項を読み上げるだけで顧客と向き合っていない対応が満点と評価される一方、台本から外れて顧客に寄り添い実際に問題を解決したやり取りが失格と判定される可能性がある、という例が挙げられています。
エージェントは「システムが測るもの」に最適化していく。
この記事はこの現象を「エージェントが評価基準に合わせて行動を変え、QAが本来目指すべき顧客体験の改善から離れていく」現象として説明しています。結論として提示されているのは、自動化を拒否することではなく、効率とスケールが得意な自動化と、深さと文脈判断が必要な場面での人間の監督を組み合わせる「ハイブリッド型」です。
AmplifAIのブログはさらに踏み込んで、「従来型のQAはもう不要だ」という立場を取っています。フォームやチェックボックス、ごく一部の通話だけをサンプリングするという仕組みは、全件を分析できなかった時代の制約から生まれたものであり、その制約自体が意味を失っているという論理です。事前に決めた5つの質問しかチェックしないフォームでは、会話の中で実際に起きている「それ以外すべて」を取りこぼしてしまう。ここで提案されているのは、QAを「測定」から「理解」へ移行させるという方向性です。
四つの記事を並べると、立場の違いが見えてきます。CX Collectiveは人間による審査を外部サービスとして提供する形を選び、Zendeskは全件評価を可能にする自動化そのものを打ち出し、metricsherpa.comとAmplifAIはいずれも従来型フォームの限界を指摘しつつ、前者はハイブリッド運用を、後者は測定から理解への転換を主張しています。全件処理という到達点は共有されていても、そこに人間の判断をどう組み込むかという設計思想は一致していません。
ここから先、自社の規模でどちらの設計が合うのかは、公開情報からは分かりません。CX Collectiveが想定するのはエージェント数5人から20人規模のチームであり、それより大きな組織や、逆にもっと小さな組織に同じモデルが当てはまるかどうかは、今回の記事からは確認できません。AutoQAの導入にかかる費用や、外部委託と自社運用のコスト差についても、参照した記事に具体的な数字は記載がありません。台本逸脱をどう評価に組み込むかという運用ルールの設計も、各社がどこまで踏み込んでいるかは分からないままです。全件評価という選択肢が手に入った今、何を測定し、どこに人間を残すかという設計は、まだ各社の裁量に委ねられている段階だと言えそうです。
出典: CX Today、Zendesk、metricsherpa.com、AmplifAI
数字で見る今週
- 35億ドル — パリのMistral AIが調達した新規資金の額です。評価額は240億ドルに達し、欧州発AI企業として過去最大級の規模となりました。自社のAI戦略で欧州発ベンダーを検討する際の目安になります。(Crunchbase News)
- 600億ドル — AmazonがQualcommから購入予定のサーバーチップの上限額です。半導体からクラウドまで巨大企業間で長期契約が積み上がっており、中小企業が使うクラウド価格にも波及する可能性があります。(TNW)
- 37% — 攻撃者が正規の認証情報を使った場合に、防御側が実際にブロックできる操作の割合です。侵入を防ぐだけでなく、侵入後の対策も同じくらい重要だと示す数字です。(BleepingComputer)
- 80% — EU AI法に基づく科学パネルの委員のうち、EUやEEA加盟国出身者が占める割合の下限です。AIモデルの検証体制が誰の手に委ねられるかを示し、海外展開時の規制対応にも関わります。(TNW)
- 1兆ドル — AIエージェントが代替しうる専門サービス・労働市場の規模を示す数字の一つとして紹介されています。ソフトウェア調達だけでなく、外部委託業務の見直しを迫る規模感を示しています。(note.com)
- 1,740万ドル — EUサイバーレジリエンス法に違反した場合の制裁金の下限的な水準です。24時間以内の脆弱性報告義務が今週から適用され、EU向け製品を扱う企業は社内体制の点検が必要になります。(The Register)
来週の予定表
- 2028年1月 — カリフォルニア州がフロンティアAIモデルをテストできる独立検証組織を認証する(TNW)
- 2026年秋の後半 — Anthropicがエンタープライズ顧客向けに顧客のクラウド内でデータを完結させる「EFS」を段階的に提供する(ITmedia AI+)
- 数週間以内 — OpenAIがAIモデルのミスアライメント事例に関する新たな開示基準を公開する(ITmedia NEWS)
- 2026年9月17日 — AI活用やCX/EXをテーマにしたZendesk Japanの国内最大フォーラムが開催される(www.zendesk.co.jp)
- 来年初頭 — 欧州連合(EU)のAIギガファクトリーの建設が開始される(TNW)
- 2028年半ば — 欧州連合(EU)のAIギガファクトリーが稼働を開始する(TNW)
- 2036年9月3日 — Amazonに発行されたQualcomm株式2500万株の購入権(ワラント)が有効期限を迎える(TNW)
- 2026年末 — ShopifyがReact Native用ライブラリ「restyle」の開発・提供を終了(アーカイブ)する(Simon Willison)
Java PDF/画像処理ライブラリをお探しですか? JPedal(PDF描画・変換)・JDeli(画像処理)で高精度な処理を実現 詳しくはこちら
