いつもお世話になっております。Qlipper運営・株式会社トドオナダです。
「LLMのリアルタイム学習の現在と未来」第19回をお届けいたします。
────────────────────────
シリーズを通じて見てきた構造を、日々の運用に落とします。
原則は一つです。出力は更新の日に測り、入力は毎日数える。
LLMの記憶は、モデル更新のときにしか変わりません。
毎週同じ質問を投げて名前が出た・出ないで一喜一憂しても、その揺れは記憶の変化ではなくノイズです。
想起の評価は、モデルが更新された日に、前世代と同一条件で比較する。ここに集約します。
確認する項目は三つです。
カテゴリ質問で名前が挙がるか。
自社の説明は正しいか。
誤った結び付き、つまりハルシネーションが生まれていないか。
特に三つ目は、更新のたびに新しく発生しうるため、毎回の確認が要ります。
一方、日常で数えるのは入力側、つまり記事の発生です。
更新窓に記事を発生させ続けられているか。
これは今日確定できる数字であり、揺れようがありません。
確定した数字だけを扱えば、運用は一喜一憂から離れられます。
出力側の三項目は、ディギディギのハルシネーション検知と正引き・逆引きで、更新の日に一度で確認できます。
────────────────────────
それができるのが、ディギディギです。
LLMが自社について語る内容の誤り、つまりハルシネーションを検知できます。
間違った説明が定着していないか、現在地の確認から始められます。
▼ ただいま1 on 1ミーティングを開催中です
LLMOの疑問やお悩みを、ディギディギを使いながらご相談いただけます。
▼ サービス資料・LLMO事前学習対策チェックシート(無料)
────────────────────────
次回もどうぞお楽しみに。
何かご不明点がございましたら、お気軽にご連絡ください。
どうぞよろしくお願いいたします。
＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝
＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝
株式会社トドオナダ
Qlipper運営事務局
〒110-0005
東京都台東区上野7-11-13 弥彦ビル302
03-6453-6886
info@todo-o-nada.com
https://qlipper.jp/
＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝
