WebサイトのAIエージェントはどれだけ速く回答するのか?Qualified、Intercom Fin、Karumiの応答時間を計測しました
要点
2026年11月に実施したベンチマークで、KarumiのWebサイト向けAIエージェントは中央値2.5秒で回答を開始しました。これはQualifiedのAIエージェント(8.9秒)の3.6倍、Intercom Fin(6.3秒)の2.5倍の速さです。12社のAIチャットに購入検討者が尋ねる同じ8つの質問を投げかけ、デスクトップ版Chromeで、各チャットが最初の言葉を画面に表示するまでの時間を計測しました。
KarumiのWebサイト向けAIエージェントは中央値2.5秒で回答を開始します。これはQualifiedのAIエージェント(8.9秒)の3.6倍、Intercom Fin(6.3秒)の2.5倍の速さです。計測は2026年11月19日に行いました。12社のAIチャットに購入検討者が尋ねる同じ8つの質問を投げかけ、デスクトップブラウザで、それぞれが最初の言葉を画面に表示するまでの時間を計測しました。
Webサイト向けAIエージェントとは、自社サイト上で購入検討者の質問に答えるチャットです。製品で何ができるのか、費用はいくらか、自社に合うのか、といった質問に答えます。訪問者が最初に感じるのはスピードです。Nielsen Norman Groupの応答時間の限界値によると、1秒未満の返答は即時に感じられ、10秒を超えると人は注意を払わなくなります。
私たちはKarumiの開発元であるため、テストはすべて公開の形で行いました。対象企業、質問、手法の各ステップをすべて以下に記載しており、誰でも半日ほどで同じテストを再現できます。
この記事の内容:
- 結果を1つの表で
- 各社のAIエージェントの回答速度
- Webサイト向けAIエージェントにとって応答時間が重要な理由
- 計測方法(ステップごと)
- 数値からはわからないこと
- 各AIエージェントのその他の機能と、Karumiだけができること
- どのAIエージェントがどのチームに合うか
何がわかったのか?
- Karumiは中央値2.5秒で回答を開始しました。4社(Agorapulse、Brevo、Karumi、Workday)での32件の回答に基づく結果です。回答の88%が3秒以内に始まりました。
- QualifiedのAIエージェントは中央値8.9秒かかりました。7社での55件の回答に基づく結果で、AdRollの5.7秒からUKGの12.3秒まで幅がありました。Qualifiedの回答の42%は、開始までに10秒を超えました。
- Intercom Finは中央値6.3秒かかりました。Intercom自身のサイトでの8件の回答に基づく結果です。Intercom自身の調査でも、2025年3月時点で最初のトークンまでの時間の中央値が7秒と報告されています(Intercom)。
- 差がはっきり表れるのは遅い回答です。Qualifiedの回答の10件に1件は開始までに13.7秒を超え、Intercomの回答の10件に1件は8.3秒を超えました。Karumiでは、同じ指標が3.0秒でした。
- この差は誤差ではありません。KarumiはQualifiedより速く(p < 0.001)、Intercom Finよりも速いという結果でした(p < 0.001、片側Mann–Whitney U検定)。速度向上の95%信頼区間は、Qualified比で3.0–4.4倍、Intercom Fin比で2.1–3.3倍です。
| プラットフォーム | 企業数 | 回答数 | 最初の言葉までの中央値 | 中央値の95%信頼区間 | 90パーセンタイル | 3秒以内に開始 | 10秒超 | 回答完了までの中央値 |
|---|---|---|---|---|---|---|---|---|
| Karumi | 4 | 32 | 2.5秒 | 2.3–2.7秒 | 3.0秒 | 88% | 0% | 6.7秒 |
| Qualified | 7 | 55 | 8.9秒 | 7.7–10.9秒 | 13.7秒 | 4% | 42% | 10.5秒 |
| Intercom Fin | 1 | 8 | 6.3秒 | 5.3–8.1秒 | 8.3秒 | 0% | 0% | 8.3秒 |
2026年11月19日、デスクトップ版Google Chromeで計測。「最初の言葉」は回答の最初の文字が画面に表示された時点、「回答完了」は返信(返信候補ボタンを含む)の表示が増えなくなった時点です。
各社のAIエージェントの回答速度は?
QualifiedのAIエージェントはどの企業でも同じ製品ですが、名前が異なります。QualifiedとSalesforceではPiper、GreenhouseではDaisy、OutreachではMaia、AdRollではAddie、Cin7ではSamという名前です。各社が独自に設定しているため、時間は企業によって異なりました。KarumiはKarumi、Agorapulse、Brevo、Workdayで、Intercom FinはIntercomで計測しました。
| 企業 | AIエージェント | 回答数 | 最初の言葉までの中央値 | 90パーセンタイル | 回答完了までの中央値 |
|---|---|---|---|---|---|
| Agorapulse | Karumi | 8 | 1.9秒 | 2.1秒 | 6.9秒 |
| Brevo | Karumi | 8 | 2.4秒 | 2.8秒 | 5.4秒 |
| Workday | Karumi | 8 | 2.7秒 | 3.1秒 | 5.8秒 |
| Karumi | Karumi | 8 | 2.7秒 | 3.2秒 | 8.3秒 |
| AdRoll | Qualified | 8 | 5.7秒 | 7.2秒 | 7.1秒 |
| Greenhouse | Qualified | 8 | 7.9秒 | 11.6秒 | 8.6秒 |
| Cin7 | Qualified | 8 | 8.3秒 | 13.4秒 | 11.2秒 |
| Outreach | Qualified | 8 | 8.5秒 | 15.1秒 | 9.9秒 |
| Qualified | Qualified | 8 | 10.8秒 | 13.8秒 | 14.4秒 |
| Salesforce | Qualified | 8 | 11.3秒 | 14.0秒 | 12.3秒 |
| UKG | Qualified | 7 | 12.3秒 | 14.2秒 | 13.9秒 |
| Intercom | Intercom Fin | 8 | 6.3秒 | 8.3秒 | 8.3秒 |
Qualifiedで最も速かったAdRoll(5.7秒)でさえ、Karumiで最も遅かった企業(2.7秒)より遅い結果でした。
Webサイト向けAIエージェントにとって、なぜ応答時間が重要なのか?
Webサイトを訪れた購入検討者には、そこにとどまる義理はありません。他の2つのタブと見比べている最中であり、入力中インジケーターを眺めさせるだけのチャットは、離脱する理由を与えてしまいます。
- 購入検討者は3秒以内の反応を期待しています。Googleの調査によると、ページの読み込みに3秒を超えるとモバイル訪問の53%が離脱し(Think with Google)、読み込み時間が1秒から3秒に延びると直帰の確率が32%上昇します(Think with Google)。この調査はチャットの返信ではなくページの読み込みを計測したものですが、購入検討者が日頃から持っている時間の感覚を示しています。今回のテストでは、Karumiの回答の88%が3秒以内に始まったのに対し、Qualifiedは4%、Intercom Finは0%でした。
- 注意力は約10秒で途切れます。Nielsen Norman Groupが1993年から変わらず示している3つの限界値は、0.1秒なら即時に感じられ、1秒ならユーザーの思考の流れが保たれ、10秒がタスクへの注意を保てる限界、というものです(NN/g)。今回のテストでは、Qualifiedの回答の42%がこの限界を過ぎてから始まったのに対し、Karumiは0%でした。
- サポートとセールスは異なります。IntercomはFinのサポート回答に5〜20秒の遅延を加えるテストを行い、満足度への明確な影響は見られなかったとしています(Intercomの調査、2025年4月)。問題を抱えた顧客は解決を待ちます。しかし、製品を検討中の購入検討者には、待つ理由がありません。
- 即時が常に最善とは限りませんが、遅くて良いことはありません。研究によると、短く自然な間があると、チャットボットに不慣れな人にはより人間らしく感じられる一方、同じ遅延は経験豊富なユーザーには逆効果になります(Gnewuch et al., ECIS 2018、Business & Information Systems Engineering, 2022)。2026年のB2B購入検討者は、毎日AIチャットを使っています。
- リードへの対応スピードは、今もパイプラインを左右します。Harvard Business Reviewに掲載されたThe Short Life of Online Sales Leadsの著者らは、「ほとんどの企業の対応は、十分な速さには程遠い」と書いています。AIエージェントは何時間もの待ち時間をなくします。残るのは秒単位の差です。営業時間外の対応の遅れがもたらす損失については、営業時間外にどれだけのパイプラインを失っているかをご覧ください。
どのように計測したのか?
- 対象企業。公開WebサイトでQualifiedのAIエージェントを使用している7社(AdRoll、Cin7、Greenhouse、Outreach、Qualified、Salesforce、UKG)。2026年11月19日に、Qualifiedの著名な顧客企業を確認して選びました。intercom.comでFinを使用しているIntercom。Karumiを使用している4社として、自社WebサイトのKarumiとAgorapulse、KarumiのチャットページのBrevoとWorkday。
- 質問。すべての企業で、[brand]の部分を企業名に置き換えた同じ8つの質問を使用しました:「[brand]では何ができますか?」「[brand]の料金はいくらですか?」「[brand]はどのツールと連携できますか?」「[brand]はSOC 2に準拠していますか?」「[brand]の導入にはどのくらいの期間がかかりますか?」「[brand]を使っているのはどの企業ですか?」「[brand]は競合製品とどう違いますか?」「英語以外の言語に対応していますか?」。
- ブラウザ。デスクトップ版Google Chrome(1440 × 900)を使用し、同じノートPCとインターネット接続から、2026年11月19日の米国東部時間午後8時40分〜午後10時10分に計測しました。プラットフォームを交互に切り替えながら企業を順番にテストしたため、特定のプラットフォームだけが空いている時間帯に当たることはありません。BrevoとWorkdayは同じ夜の最後に追加しました。各企業につき新規訪問1回と、8つの質問からなる会話1回を行ったため、すべての企業が同じ重みで集計されています。
- 質問の方法。スクリプトが各質問をチャットに入力してEnterキーを押し、回答が5秒間変化しなくなるのを待ってから次の質問をしました。
- 計時。スクリプトは、チャットのテキストのあらゆる変化をブラウザの高精度タイマーで記録しました。最初の言葉までの時間は、Enterキーを押してから回答の最初の14文字が画面に表示されるまでです。入力中インジケーター、名前のラベル、すでに画面に表示されていたテキストは含みません。回答完了までの時間は、返信のテキストが最後に増えた時点までです。
- 除外。1件の質問では計測可能なテキストの回答が得られなかったため(例:テキストではなくカードやボタンが返された、60秒以内に返信がなかった)、除外しました:UKG(1件)。
- 統計。中央値と95%ブートストラップ信頼区間(10,000回の再標本化)を算出し、片側Mann–Whitney U検定でKarumiと各プラットフォームを比較しました。
数値からはわからないことは?
- 計測は1晩、回線は1つ。応答時間は負荷やネットワークによって変わります。今回は2026年11月19日の1晩に、1か所からテストしました。
- 実験環境ではなく実際の導入環境。モデル、ナレッジ、指示は各社が独自に選んでいるため、プラットフォームの最高性能ではなく、購入検討者が実際に接するAIエージェントを計測しました。
- Intercomは1社のみ。Intercom Finは1社でのみ計測したため、3つの中で最も不確実性の高い数値です。
- スピードは評価軸の1つにすぎません。回答の質、ルーティング、商談予約、連携機能は評価していません。遅くても商談予約につながる回答は、速くても予約につながらない回答に勝ることがあります。
- 私たちはベンダーです。私たちを信用していただかなくても済むよう、手法を公開しています。ぜひ再現してみて、異なる結果が出たらお知らせください。
Karumiの回答が速いのはなぜか?
Karumiはライブの音声デモのために作られました。音声デモでは、エージェントが5秒黙るだけで故障しているように聞こえます。Webサイトのチャットにも同じエンジンを使っています:
- 1秒未満の検索。ある顧客のチャットで2026年7月から11月に行われた381件の検索では、回答に必要な文章を見つけるまでの時間は中央値0.8秒でした。
- 書かれたそばから言葉が表示されます。Karumiはモデルが書き進める回答をそのままストリーミング表示するため、訪問者は残りが届く間に読み始めることができます。
- 即座のフィードバック。訪問者がEnterキーを押すとすぐに入力中インジケーターが表示され、その間に回答が準備されます。
さらに同じエージェントが、短いクリップで製品を見せたり、ワンクリックでライブデモを開いたりできます。詳しくはAIデモエージェントとはとフォームなしでWebサイトのトラフィックをデモにつなげる方法をご覧ください。
各AIエージェントは他に何ができるのか?
今回のテストで3つが最も大きく異なったのはスピードです。それ以外の点について、各ベンダー自身のページに基づいて比較すると次のとおりです。
| 機能 | Karumi | Qualified | Intercom Fin |
|---|---|---|---|
| 自社コンテンツをもとに購入検討者の質問に回答 | 対応 | 対応 | 対応 |
| 音声での会話 | 対応 | 対応 | 対応(Fin Voice) |
| 適切な担当者との商談を予約 | 対応(LeanDataによるルーティングを含む) | 対応(割り当て済みの担当者にルーティング) | 対応(CalendlyまたはChili Piper経由) |
| チャット内での担当者へのライブ引き継ぎ | 対応(担当者がSlackから参加) | 対応(EnterpriseプランとUltimateプラン) | 対応 |
| SalesforceとHubSpot | 対応 | 対応 | 対応 |
| 会話後のフォローアップメール | 対応(Workflowsを使用) | 対応(Qualified Email) | 非対応(Finでは不可) |
| ZoomやGoogle Meetでのライブ商談に参加 | 対応(Teamsにも対応) | 対応(Piper for Sales) | 記載なし |
| リードへの電話発信 | 対応(コールエージェントを使用) | 記載なし | 不明(Fin Voiceに「Outbound」の記載はあるが詳細なし) |
| 顔を合わせたビデオでの対話 | 非対応 | 対応 | 記載なし |
| 実際の製品のライブデモ | 対応 | 非対応(スライドによるプレゼンテーション) | 非対応 |
| 自社製品内で録画した製品クリップ | 対応 | アップロードしたコンテンツを共有 | 記載なし |
| 独自のカーソルで訪問者にWebページを案内 | 対応 | 記載なし | Finでは不可(Intercom Product Toursは別売りのアドオン) |
| 3秒以内に回答を開始(今回のテスト) | 88% | 4% | 0% |
出典(2026年11月20日確認):Qualified Piper、Qualified Conversations、Qualified Meetings、Qualified Email、Qualifiedの料金、Qualifiedニュースルーム、Fin for Sales、Fin Voice、Intercomの料金。「記載なし」は、ベンダー自身のページで言及されていないことを意味します。
Karumiだけができること
- 実際の製品のライブデモ。エージェントがブラウザで製品を開き、音声またはチャットで話しながら製品を見せ、実際の画面上で購入検討者自身の質問に答えます。Qualifiedのエージェントが表示するのはスライドによるプレゼンテーションで、Finのデモが見せるのはFin自身です。詳しくはライブ型と録画型のAIデモエージェントの比較をご覧ください。
- 自社製品から作る製品クリップ。自社製品内で録画した短いクリップを、チャットでの質問に合わせて表示し、製品が変わると録画し直します。他の2つは、アップロードしたコンテンツを共有する仕組みです。
- Webサイトを直接操作。エージェントがページを操作し、自らのカーソルで訪問者にWebサイトを案内しながら、説明している各部分を指し示します。karumi.aiで実際にご覧いただけます。
3つすべてができること
3つとも、自社コンテンツをもとに質問に答え、音声で会話し、適切な担当者との商談を予約し、会話を人に引き継ぎ、SalesforceとHubSpotにデータを書き込みます。KarumiはLeanDataでルーティングし、Slackで適切なBDRに通知します。また、KarumiとQualifiedはどちらも会話後にフォローアップメールを送信します。Intercomによると、Finは「現在、自動メールのフォローアップシーケンスには対応していない」とのことです。
どのAIエージェントがどのチームに合うのか?
- Qualifiedは、Salesforceでパイプラインを管理し、そのルーティングや商談と連動したAI SDRを求めるチームに適しています。ただし私たちの計測では、最初の回答は遅めです。
- Intercom Finは、Intercomのヘルプデスク上でカスタマーサポート用のAIエージェントを1つ導入したいチームに適しています。サポートの領域では、調査によるとスピードの重要性は比較的低いとされています。
- Karumiは、Workdayのように優れた製品を持ち、それを競争優位として見せたい企業に適しています。購入検討者は同じチャットの中で数秒で回答を得られ、クリップ、ライブデモ、ページのガイド付き案内を通じて製品そのものを見ることができます。
その他のベンダーについては、おすすめのAIセールスエージェントとインバウンドエージェントとはをご覧ください。
よくある質問
QualifiedのAIエージェント(Piper)の回答速度は?
今回のテストでは、7社での55件の回答において、QualifiedのAIエージェントは中央値8.9秒で回答を開始し、回答の42%は開始までに10秒を超えました。時間はAdRollの5.7秒からUKGの12.3秒まで幅がありました(2026年11月)。
Intercom Finの回答速度は?
2026年11月の私たちのテストでは、Intercomのサイト上でFinは中央値6.3秒で回答を開始しました。Intercomは2025年3月に、最初のトークンまでの時間の中央値を7秒と報告しています。
Webサイト向けAIチャットボットの適切な応答時間は?
最初の言葉は3秒以内を目指し、10秒は決して超えないようにしましょう。ページ速度に関するGoogleの調査では、ページの読み込みに3秒を超えるとモバイル訪問の53%が離脱することがわかっており、Nielsen Norman Groupは注意力の限界を10秒としています。今回のテストでは、3秒以内に始まった回答の割合はKarumiが88%、Qualifiedが4%、Intercom Finが0%でした。回答の準備中は、すぐに表示される入力中インジケーターが役立ちます。
AIチャットが速いほど、訪問者のコンバージョンは高まりますか?
Webサイトのセールスチャットについて、応答時間とコンバージョンの関係を調べた公開の対照研究はありません。サポート分野の研究では問題を抱えた顧客は待つことが示されている一方、注意力の研究では人は約10秒で関心が離れていくことが示されています。まだ検討段階にある購入検討者こそ、最も離れていきやすい人です。
最初の言葉までの時間はどのように計測しましたか?
デスクトップ版Chromeで、スクリプトが各質問をチャットに入力してEnterキーを押し、チャットのテキストのあらゆる変化をブラウザの時計で記録しました。最初の言葉までの時間は、Enterキーを押してから回答の最初の文字が画面に表示されるまでです。入力中インジケーターと名前のラベルは含めていません。
このベンチマークを再現できますか?
はい。デスクトップブラウザで各社のWebサイトを開き、上記の8つの質問を同じ順番で尋ね、画面録画またはスクリプトを使って各回答が始まるまでの時間を計測してください。私たちのスクリプトと生の計測データをご希望の場合は、お問い合わせいただければ共有します。
karumi.aiでKarumiに実際に質問してみるか、ライブデモをお試しください。