キーワード検索が完全に見逃した発言を捉えた、あるメドテック企業

セールスイネーブルメント責任者には、あらゆる通話の書き起こしから望む単語を検索できるツールがありました。

「無制限。」「48ヶ月。」「完全対応。」どんな用語のどんな言及も、即座に見つけることができました。プラットフォームはすべての出現箇所をハイライトし、タイムスタンプを付け、文脈を確認できるようにしてくれました。

しかし、実際の練習通話の正確性を自分で確認してみると、キーワード検索が完全に見逃していた発言を次々と発見しました。

ある担当者は「そのクラスのものはだいたい全部対応してますよ」と言いました。キーワード「完全対応」は一度も出てきませんでした。別の担当者は「専属の臨床サポートが受けられます」と言いました。キーワード「24時間365日」は書き起こしのどこにもありませんでした。3人目の担当者は「主要市場すべてで承認を取得済みです」と言いました。キーワード「FDA承認」は一度も現れませんでした。

検索ツールは、指示されたことを正確に見つけていました。それ以外のすべてを見逃していたのです。

これは、あるメドテック企業がキーワード検索は検証ではないと気づき、代わりに何を構築したかについての物語です。

準備:絶えず変化する製品カタログ

この企業は、病院や画像診断センターに診断用画像システムを開発・販売しています。同社の製品ラインは複雑です:異なる機能を持つ複数のシステム、四半期ごとに更新されるソフトウェアバージョン、リリースごとに変わる互換性マトリクス、市場や用途によって異なる規制承認状況。

65名の営業チームは、複雑なB2B営業サイクルを担当しています。平均的な商談には複数のステークホルダーが関わります——放射線科医、IT部門責任者、購買担当、病院の経営陣。すべての商談には製品に関する発言が含まれます——仕様、互換性、規制状況、サポートに関する約束。

セールスイネーブルメント責任者は、すべての練習セッションを書き起こし、キーワード検索ができる通話分析プラットフォームに投資していました。彼女はこれで十分にエラーを検出できると考えていました。それは間違いでした。

テスト:キーワード検索が見逃すものを見つける

彼女はシンプルなテストを実行しました。プラットフォームが書き起こした直近の練習通話5件を聞きながら、担当者が自社製品について発した事実に関する発言をすべて自分の手で抽出しました。そして、自分が手作業で抽出したものと、プラットフォームのキーワード検索が検出していたはずのものを比較しました。

• 通話1: 担当者が「主要なEMRのほとんどには基本的に対応しています」と発言。プラットフォームの「完全対応」検索は何も見つけませんでした。担当者が対応していると示唆していた主要EMRの1つは、実際には対応していませんでした。
• 通話2: 担当者が「いつでも対応可能な専属の臨床アプリケーションスペシャリストがつきます」と発言。プラットフォームの「24時間365日サポート」検索は何も見つけませんでした。実際のサポートは営業時間内のみで、24時間以内対応のSLAが適用されていました。
• 通話3: 担当者が「米国とヨーロッパの大部分で承認を取得しています」と発言。プラットフォームの検索は「FDA承認」というフレーズを見つけましたが、「ヨーロッパの大部分」が正確かどうかは評価できませんでした——実際には、いくつかの主要な欧州市場で担当者が言及しなかった追加承認が必要でした。
• 通話4: 担当者が「ソフトウェアアップデートは通常含まれています」と発言。キーワード検索は「ソフトウェアアップデート」を見つけましたが、「通常」という言葉がどれだけ重要な意味を持っているかは分かりませんでした——一部のアップデートは含まれていましたが、メジャーバージョンアップは含まれていませんでした。
• 通話5: 担当者が「主要な造影剤ならどれでも対応します」と発言。キーワード検索は「造影剤」を見つけましたが、「どれでも」が正確かどうかを知る方法はありませんでした。担当者が対応していると示唆していた造影剤のいくつかは、実際には対応していませんでした。

5件の通話。5つの見逃された発言。プラットフォームからのフラグはゼロ件。

見逃された発言のコスト

セールスイネーブルメント責任者はこの発見をVP of Salesに共有しました。彼は驚きませんでした。彼は2四半期にわたって販売後の問題を追跡していました。その期間で:

• 導入後のサポートチケットの**12%**は、営業プロセス中に不正確な製品情報を受け取った顧客からのものでした
• 導入の遅延の**9%**は、誤っていたことが判明した互換性の思い込みが原因でした
• 初年度に離脱した顧客の**7%**が「営業時に設定された期待と実態が合わなかった」と回答しました

キーワード検索プラットフォームはレポートを生成していました。エラーを防止していたわけではありませんでした。

「問題になりそうな単語はすべて検索できました。でも、何を探すべきか分からないものは検索できませんでした。そして、本当のミスはまさにそこで起きていたのです」

介入策:キーワード検索をクレーム抽出に置き換える

この企業は、事前に定義された用語に依存しない**EOS(akaeos.com)**にプラットフォームを置き換えました。

特定の単語を検索する代わりに、EOSは各練習セッションからすべての事実に関する発言を抽出し、それぞれを企業の実際の製品ドキュメントと照合しました:

1. キーワードではなくクレームを抽出しました。 プラットフォームは「完全対応」や「24時間365日」を探すのではなく、自然な発話をチェック可能な個別の命題として解析しました。担当者が「主要なEMRのほとんどには基本的に対応しています」と言えば、プラットフォームはそれをEMR互換性に関するクレームとして抽出しました。担当者が「米国とヨーロッパの大部分で承認を取得しています」と言えば、それを規制承認に関するクレームとして抽出しました。
2. 各クレームをドキュメントと照合して検証しました。 抽出されたすべてのクレームは、企業の現在の互換性マトリクス、規制承認リスト、サービス契約条件と照合されました。
3. 引用元付きの具体的な判定を返しました。 キーワードをハイライトする代わりに、矛盾するクレームを明確な引用元とともにフラグ付けしました:

「矛盾(Contradicted):Epic連携は現行バージョンでは対応していません。Compatibility Matrix v6.3、セクション2.1を参照。」

「矛盾(Contradicted):ドイツでは追加の規制承認が必要です。Regulatory Status by Market、附録Bを参照。」

この違いは微妙なものではありませんでした。一方のプラットフォームは既に知っている単語を検索していました。もう一方は、予期していなかったクレームまで識別していたのです。

最初の30日間、数字で見ると

このパイロットはまだ初期段階です——35名、1ヶ月目です。そのため、ここでの結果は成熟した本格導入の90日間の前後比較ではありません。キーワード検索をやめてクレーム抽出を始めた直後にほぼ即座に表面化した、いわばスナップショットです。空欄や「—」で示されたセルは、データが欠けているわけではありません——それこそがポイントなのです。キーワード検索プラットフォームはそもそもクレームの正確性を測定していなかったため、ほとんどの行には比較可能な過去の基準値が存在しません。その基準値の欠如こそが、通話1〜5の監査で明らかになったことなのです。

最初の1ヶ月で発見したこと

1. 担当者たちは、自分が間違っていると気づかないまま発言していました。 この企業に5年間勤務していたある担当者は、1年以上にわたって互換性に関する発言を誤って伝え続けていたことに気づきました——誰もチェックしていなかったため、誰も気づかなかったのです。
2. 最も多かった誤りは、明示的な発言ではなく暗示的な発言の中にありました。 担当者が「この製品はFDA承認済みです」と誤って発言することは稀でした。しかし、実際よりも広い規制カバレッジを暗示することは頻繁にありました——いくつかの重要な市場がまだ承認待ちであるにもかかわらず、「主要市場の大部分で承認済み」と発言するようなケースです。
3. マネージャーたちは、以前は見えなかったものをようやく見られるようになりました。 EOSのマネージャーダッシュボードを通じて、セールスイネーブルメントチームはどの製品領域で最も矛盾クレームが発生しているかを確認でき、それに応じてトレーニングの対象を絞ることができました。以前は推測するしかありませんでした。今はデータがあります。

「最初の1ヶ月で、何年も前からシステムに存在していた誤りを発見しました。担当者が不注意だったからではありません——以前のプラットフォームがそもそもチェックしていなかったからです。そういう設計ではなかったんです。単語を検索していただけで、発言を評価していたわけではありませんでした」

あなたのトレーニングスタックは、キーワードを検索していますか、それともクレームを抽出していますか? 12ページのレポート『Beyond Roleplay: The Rise of the Sales Knowledge Engine』では、完全な評価フレームワーク、10の質問による監査、そしてどのベンダーにも尋ねるべきデータ主権に関する質問をご紹介しています。[ホワイトペーパーをダウンロード →]

キーワード検索が失敗する理由

キーワード検索は特定の用語を見つけるのには有効です。しかし、営業の会話は台本どおりには進みません。担当者は言い換えます。ヘッジ(断定を避ける表現)を使います。省略した言い方をします。暗示的な発言をします。

「主要なEMRのほとんどには基本的に対応しています」と言う担当者は、互換性に関する発言をしているのです——しかし「完全対応」を検索するキーワード検索は、これを完全に見逃します。「米国とヨーロッパの大部分で承認を取得しています」と言う担当者は、規制に関する発言をしているのです——しかし「FDA承認」を検索するキーワード検索は、その一部しか見つけられず、残りを評価することもできません。

根本的な問題は構造的なものです。キーワード検索は、実際に何が主張されたのかを理解していません。単に文字列を照合しているだけです。それに対してクレーム抽出は、とっさの発話をチェック可能な個別の命題に変換します——それぞれが、真実の情報源に対して独立して真か偽かを判定できるほど具体的な文として。書き起こしは、何が話されたかを教えてくれます。クレーム抽出は、実際に何が主張されたのかを教えてくれます。

営業リーダーへの示唆

あなたのトレーニングプラットフォームが、事実の誤りを検出するためにキーワード検索に依存しているなら、導入後の問題があなたのデスクに届くまで気づかない死角を抱えている可能性があります。

キーワード検索は、既に何を探すべきか分かっているものしか検出できません。言い換え、ヘッジされた言葉、複合的な発言、暗示的な比較を見逃します。それに対して事実に基づく検証システムは、何を探すべきかを事前に知る必要がありません。表現方法にかかわらずすべての発言を抽出し、それぞれをあなたの実際のドキュメントと照合します。

互換性に関する発言がシステムが病院で実際に機能するかどうかを決定し、規制に関する発言が販売できるかどうか自体を決定するメドテック企業において、この違いは重要です。

あなたのドキュメントが、そのまま知識チェックに変わる様子をご覧ください。 EOSは製品ドキュメントを、実践可能で検証可能な知識に変換します——発言抽出、事実に基づく検証、そして担当者が実際に何を理解しているかを明らかにする自動生成クイズまで。akaeos.comで最大5席まで無料で始めるか、**[ホワイトペーパー全文をダウンロード]**してください。