AI議事録の精度
AI議事録の精度とハルシネーション対策。誤りの見つけ方と、確認の手順
AI議事録の誤りは、文字起こしの段階と要約の段階の2か所で起きます。会議の要約で起きやすいハルシネーションの型、原因、共有前に15分でできる確認の手順、ツールを公平に比べる方法を、架空の会議の例で説明します。
公開日:更新日:執筆・運営:Klang AI AB
AI議事録の誤りは2つの段階で起きる
「AI議事録の精度が低い」と感じたとき、まずどの段階で誤ったかを分けます。直す場所が違うためです。
文字起こしが正しくても、要約で誤りが入ることがあります。逆に、文字起こしの誤りはそのまま要約に入ります。文字起こしの精度の確かめ方は、別のガイドでCER(文字誤り率)の計算ツールと一緒に説明しています。
| 観点 | 文字起こしの誤り | 要約の誤り |
|---|---|---|
| 例 | 「中田さん」が「田中さん」になる | 「検討する」が「決定した」になる |
| 見つけ方 | 元の音声を聞いて文字と照合する | 要約の一文を文字起こしの発言と照合する |
| 主な原因 | 録音の質、固有名詞、同時発話 | 指示の書き方、文脈の欠落、AIの推測 |
| 直す場所 | 文字起こしの編集、用語集、次回の録音環境 | 要約の編集、指示の見直し |
レイヤー1
録音
マイクが遠い、雑音、同時発話。ここで欠けた声は後の工程で取り戻せません。
レイヤー2
文字起こし
聞き間違い、固有名詞の誤変換、話者の取り違えが起きます。
レイヤー3
要約
文字起こしにない決定や数字が加わる、条件や否定が落ちる、といった誤りが起きます。
レイヤー4
共有
確認前の要約が配られると、誤りが事実として広がります。
会議の要約で起きやすいハルシネーションの5つの型
一般的な文章の要約と違い、会議の要約では誤りの起こる場所がある程度決まっています。次の5つを知っておくと、確認の当たりがつけやすくなります。
どの型も、要約の文章は自然で読みやすいのが特徴です。読みやすさは正しさの証拠にならないため、決定事項・数字・担当者の3つは必ず元の発言に戻って確かめます。
| 型 | 元の発言 | 誤った要約 |
|---|---|---|
| 決定の創作 | 「価格は次回までに各自考えておきましょう」 | 「価格を10%値下げすることで合意」 |
| 提案→決定 | 「来月から週1回にしてはどうでしょう」 | 「来月から週1回に変更する」 |
| 話者の入れ替え | 顧客「御社で見積もりを出せますか」 | 「顧客が見積もりを作成する」 |
| 数字の合成 | 「初期費用は30万円、月額は5万円」 | 「費用は35万円」 |
| 否定・条件の脱落 | 「予算が通らなければ見送ります」 | 「実施する」 |
ハルシネーションが起きる主な原因
原因が分かると、確認だけでなく、起きにくくする工夫もできます。
会話に結論がない
会議が結論を出さずに終わると、要約を「まとめよう」とするAIが結論らしい文を補うことがあります。会議の最後に決定事項を口に出して確認すると減らせます。
文字起こしの誤り
固有名詞や数字の聞き間違いは、そのまま要約に入ります。話者の取り違えは「誰が担当するか」を逆にします。
主語と指示語の省略
「それでお願いします」の「それ」が何か、前後が離れているとAIが取り違えます。
指示があいまい
「要約して」だけでは、未決事項や条件を残すかどうかがAIに伝わりません。決まったことと決まっていないことを分けるよう指示します。
長い会議と複数の議題
議題が多いと、別の議題の数字や担当者が混ざることがあります。議題ごとに確かめます。
共有前に15分でできる確認の手順
1時間の会議の要約を想定した手順です。すべてを聞き直すのではなく、間違えると困る箇所から確かめます。
要約を手で直した版と、AIが出した版の違いを残しておくと、どの型の誤りが多いかが分かり、指示文の改善に使えます。2つのテキストの違いは、差分ツールで並べて確かめられます。
- 01
決定事項を1つずつ元の発言に戻る(5分)
要約の決定事項ごとに、根拠になった発言を文字起こしで探します。見つからない決定事項は、要約から外すか「未確認」とします。
- 02
数字だけを拾って照合する(3分)
要約に出てくる金額・数量・日付・期限をすべて書き出し、同じ数字が文字起こしにあるかを確かめます。重要な数字は元の音声で聞き直します。
- 03
担当者と話者を確かめる(3分)
タスクの担当者が、実際に引き受けた人かを確認します。質問された人と引き受けた人を混同していないかを見ます。
- 04
否定・条件・保留を探す(2分)
文字起こしで「ない」「なら」「次回」「保留」を検索し、要約で落ちていないかを確かめます。
- 05
AIに根拠の引用を求める(2分)
AIチャットが使える場合は「この決定事項の根拠になった発言をそのまま引用して」と聞きます。引用が見つからない項目は誤りの可能性が高いと考えます。
AI要約が間違っていたときの直し方
AI要約の間違いを見つけたら、その場で文章を直すだけで終わらせず、どの段階の誤りかを見分けます。原因によって、次の会議で同じ間違いを減らす方法が変わります。
間違いの多くは、文字起こしの誤りか、会議で結論が出ていないことのどちらかに行き着きます。前者は録音環境と用語集で、後者は会議の終わりに決定事項を口頭で確認する習慣で減らせます。AIの指示を細かくするのは、その次の手段です。
| 見つけた間違い | まず確かめること | 直し方と次回の対策 |
|---|---|---|
| 人名・社名・製品名が違う | 文字起こしの段階で、すでに違っていないか | 文字起こしを直してから要約を作り直す。用語集に正しい表記を登録する |
| 誰も言っていない文が文字起こしにある | 無音や雑音の区間ではないか。元の音声を再生して確かめる | 該当する文を削除する。音声認識モデルによっては、無音や雑音の区間に話されていない定型文を出力することがある |
| 決まっていないことが決定事項にある | 根拠の発言が、提案や希望ではないか | 「未決」に移す。指示に「提案を決定事項に入れない」と書く |
| 数字が合わない | 複数の数字が足し合わされていないか | 元の数字を個別に書く。数字は要約せずそのまま残すよう指示する |
| 担当者が違う | 質問された人と、引き受けた人を取り違えていないか | 担当者を直す。話者の割り当てが誤っていれば、文字起こしの話者から直す |
AI議事録ツールの精度を公平に比べる方法
各社が示す精度の数字は、試した音声と測り方が違うため、そのまま比べられません。自分の会議の録音で、同じ条件で比べます。
- 静かな一人の録音ではなく、普段の人数・マイク・専門用語の会議を使う。
- すべてのツールに同じ録音を入れ、要約の指示もできるだけそろえる。
- 1本の会議の結果で決めず、種類の違う会議を2〜3本試す。
| 比べる項目 | 測り方 | 記録の例 |
|---|---|---|
| 文字起こしの誤り | 3〜5分の区間で参照文を作り、CERを計算する | CER、固有名詞の誤りの数 |
| 話者の誤り | 発言のまとまりごとに、話者が正しいかを数える | 誤った区間の数 |
| 要約の誤り | 要約の決定事項・数字・担当者を元の発言と照合する | 根拠のない項目の数、落ちた条件の数 |
| 確認の手間 | 共有できる状態にするまでの時間を測る | 修正にかかった分数 |
Klangで要約を確かめるときに使える機能
Klangを例に、AI議事録の確認を短くする機能を紹介します。どのツールでも、共有前に人が確かめる工程は必要です。
Klangでは、要約の一文が気になったら文字起こしに戻り、文をクリックして元の音声を再生できます。聞き取りにくかった箇所は確認用にハイライトされ、修正候補から該当箇所を確かめられます。AIチャットで質問すると、回答から根拠になった発言に戻って確かめられます。
話者の自動識別と、社名や製品名をそろえる用語集はプロプランの機能です。お客様の会話データはAIモデルの学習に利用しません。
要約から、元の発言と音声へすぐ戻れる
Klangは会議を文字起こしし、要約・決定事項・タスクを作成します。要約の一文が気になったら、文字起こしと元の音声で確かめてから共有できます。
- 文をクリックして元の音声を再生できます。
- AIチャットの回答から、根拠の発言に戻れます。
- お客様の会話データをAIモデルの学習に利用しません。
よくある質問
AI議事録の精度はどのくらいですか?
一律の数字では表せません。録音の質、話者の数、専門用語、要約の指示で大きく変わります。自分の会議の3〜5分でCERを計算し、要約の決定事項・数字・担当者を元の発言と照合して確かめるのが確実です。
AI議事録のハルシネーションはなぜ起きるのですか?
会議に結論がないのにAIが結論らしい文を補う、文字起こしの誤りがそのまま入る、主語や指示語を取り違える、といった理由で起きます。指示で「決まっていないことは決定として書かない」と伝え、共有前に根拠の発言を確かめます。
ハルシネーションを完全に防ぐ方法はありますか?
完全に防ぐ方法はありません。起きにくくする工夫(会議の最後に決定事項を口に出す、指示を具体的にする、用語を登録する)と、共有前の確認の両方が必要です。
AI議事録の精度が低いと感じたら、まず何をすればよいですか?
誤りが文字起こしの段階か、要約の段階かを分けます。文字起こしが違うなら録音環境や用語の登録を見直し、文字起こしは合っていて要約が違うなら、要約の指示と確認の手順を見直します。
AI議事録ツールの精度はどうやって比べればよいですか?
同じ録音をすべてのツールに入れ、文字起こしの誤り、話者の誤り、要約の誤り、共有できるまでの時間を同じ表に記録します。公表されている精度の数字は条件が違うため、そのままは比べません。