Post

Conversation

ここ数日RAGが話題だから専門家の一員として私見を述べるけど、RAGの本質的問題は検索技術がどうのとかいうものではないのよ。経理や人事も含めた総合的問題なのよ。 ・情報共有インセンティブがない サラリーマンのオッサンが他人に情報共有を積極的にするインセンティブが皆無なことが最大の問題。 報酬がもらえない限りは、情報を自分で囲い込んでおいて組織内で生き残るのがサラリーマンの生存戦略として正しい。 特に年功序列で成果報酬でもない、残業代が出る、しかも解雇リスクも低い日本企業においては、サラリーマン側はどうでもいい仕事を残すインセンティブが働く。 そうでなくても、自分のHDDの中にある資料をわざわざ選ぶ時間かけて共有するなんてしないでしょ。 他人に情報共有をしたら100円報酬とかいう会社はほぼない。 そもそもそれを計測するシステムもない。 ・Webが進化したのは報酬システム インターネット初期は、情報発信をただしたいだけのボランティア精神旺盛なオタクな人たちが集まっていただけだったが、次第に誰もが情報発信する社会になり、あらゆる情報がWeb検索できるようになった。 その最たる理由が報酬システムであり、広告モデルだった。Google広告なんか典型例。 自分のWebサイトやブログを訪問する人が増えれば収入が増えるわけで、より情報発信をしようと頑張るし、検索されやすい書き方でhtmlコードを書く。 インスタやXで万垢を目指す垢も、収入目的の垢が多い。わかりやすくて検索されやすいように投稿する。 報酬システムがあるというのは、情報共有行動においては最たる重要性を占める。 何の報酬もなければ、Webサイトを運営する人もブログ発信する人も激減するのよ。そのくらい報酬システムは重要。 これは企業の中でも同じなのよ。 ・現在のRAGモデルはシステム部門の自慰 RAGを作ろうとすると、システム部門のオッサンがAzure OpenAIとかVertex AI叩いてそれらしいものを作ろうとするけど、システム部門のオッサンが企業の最新の最前線の情報持ってるわけ無い。 社員たちがゴミのように貯めたファイルサーバーを管理しているだけで、中に入っている情報の重要性評価スコアをつけることも出来ないし、何が有用であるかもわからない。 そして数カ月かけてヒーヒー言いながらRAGを作っても情報はすぐに陳腐化し、半年もすれば一生懸命作ったRAGは時代遅れになり、最前線の社員には「使えねえ」と言われるようになる。 最新の情報を入れようとまた「最新の資料をください」と毎四半期ごとに各部門にお願いに行って、社員に資料ファイルを提供させても、そこに報酬がなければ提供などしない。 そもそもシステム部門のオッサンの社内身分は低いのだから。 ・RAGを成功させるために必要なこと3つ 情報共有報酬モデルを作ること。 RAGの仕様に、引用された回数が多い文献の統計データを取る機能を搭載し、その統計データを元に社員に情報共有報酬を払うモデルを作る。 なんでRAGにそういう機能が少ないのか理解が出来ない。 自分で情報を囲い込んでいたオッサンが 「嫁さんから月3万円って言われてる小遣い増やせるかも」 とか思って共有するインセンティブは多少は産まれる。 それが社員の事務コストを大きく下げることが出来るか、対競合競争力を高めることに繋がり収益拡大につながるのであれば、大きな報酬を払っても良いと思う。 もう1つは、現場社員がRAGを作れること。 システム部のしおれたオッサンが毎四半期各部門を回って「最新のファイルください」とか言って回る必要がなく、むしろ各部門の現場で自分たちが欲しいものを作れるようなRAGでなければならない。 それを実現するには、専門知識が極限まで不要としたRAGでないといけなくて、現行製品で言えばNotebookLMなんかそれに当てはまる適切な製品の最たる例。 もっとシンプルでもいい。 まだ駆け出しの製品だからRAGには足りないだろうけど、あのレベルじゃないと企業の中でRAGなんて成功しない。 最後の1つは、情報が最初からクラウドにあること。 結局情報のコピーを集める作業があるからめんどくさいわけだし、コピーを求めるのは社内のローカルのサーバーとかHDDにおいてるからである。 元からファイルの場所がクラウドにあって、そこに適切にアクセス制御がされていれば、最新ファイルの提供を求める必要はない。 Google DriveでもBoxでもSharepointでもなんでもいいし、SalesforceとかSlackとかでもいいが、とにかく個人社員のパソコンの中に格納されていたらAIは絶対探せないわけで、クラウドにある、そして適切に情報共有制限がかけられているという状態があればいい。 これらが揃えば、その社員1人1人が自分が見れる範囲の情報の中で勝手にRAGを作ることが出来るし、作るインセンティブもあるし、RAGも回答を作りやすくなる。 システム部のオッサンが「これを作れば喜ぶだろ」みたいな自己満で使い物にならないものを量産するより、より生産性の高いものが作れるようになる。
Quote
深津 貴之 / THE GUILD
@fladdict
これはそうやろうな。デジタルなのにAIが効果を発揮しない会社 = 暗黙知や属人のブラックボックスが多い x.com/KentaMurata/st…