この記事でわかること
論文「Corpus2Skill」が示した「検索から探索へ」の設計思想
階層スキル辞書とエージェントナビゲーションの技術要点
5勝3分3敗の内訳と、勝てるコーパス・負けるコーパスの条件
社内AI導入で「RAGを続けるか、探索型に切り替えるか」を判断するチェックリスト
論文が扱っていない領域と、運用設計上の注意点
3つの要点
提案: コーパスをオフラインで階層要約に圧縮し、エージェントが上位ノードから順に辿るCorpus2Skillを提案しました。
改善: dense、hybrid、hierarchical retrieval、agentic RAGの4系統と比較し、11データセットで5勝3分3敗、社内サポート系ベンチで明確な改善を報告しました。
実務: 「単一ドメインで分類軸が明確なコーパス」ではRAGより優位、逆に「オープンドメインの事実問合せ」や「均質な表データ」では負けます。
従来手法の課題:RAGは「情報の位置関係」を失う
RAGは、コーパスをチャンクに分割し類似度で拾う設計です。この設計は、階層構造や領域境界を陽に持たないため、企業ナレッジの位置関係が失われやすいという弱点があります。
論文が指摘する従来手法の課題は次のとおりです。
類似度検索は「近い断片」を返すが、その断片がどの領域の話かを保持しない
チャンク境界を跨ぐ根拠は、リランカーを増やしても取りこぼしやすい
部門横断コーパスでは、関係のない領域の高類似チャンクが混入する
コーパスを分けるほど検索精度は上がるが、切り分けの粒度が運用負荷になる
社内文書は、通常「事業→部門→プロダクト→仕様書」のような階層で人が管理しています。RAGは、この階層を無視して平坦なベクトル空間で扱うため、人が持つ探し方と乖離しやすい構造になっています。
提案手法:コーパスを階層スキル辞書に圧縮し、エージェントが辿る
Corpus2Skillは、事前処理とサーブ時処理を分離した二段構成です。
事前処理では、コーパス全体を対象に次を行います。
ドキュメントを主題単位で束ね、階層ノードに割り当てる
各ノードに、要約と代表キーワードを付与する
上位ノードはより短い要約、下位ノードは詳細な要約を持つ
サーブ時には、LLMエージェントがこの階層を上から辿ります。
上位ノードの要約だけを読み、質問に近い枝を選ぶ
選んだ枝で、より詳細なノードを読む
不足があれば別ノードへバックトラックする
最下層で必要な原文だけを取り出し、回答を生成する
直感的な比喩は、社内Wikiでフォルダを辿る動きに近いものです。平坦なベクトル検索を廃止するのではなく、上位で領域を絞り、下位で本文に触れる二段構えにする発想です。
既存手法との差分は次の3点です。
検索範囲を「コーパス全体」ではなく「選んだ枝」に絞る
探索の判断をエージェント側の推論に任せる
ドキュメント間の意味的な近さではなく、階層上の位置関係を優先する
実装コードは公式GitHub(github.com/dukesun99/Corpus2Skill )で公開されており、既存RAGスタックへの差し替え実験が可能です。
実験結果:エンタープライズ系で強く、事実問合せで弱い
主要な比較軸を整理します。
比較軸
従来RAG系
Corpus2Skill
実務上の読み方
単一ドメイン、明確な分類軸
中~高
高
社内文書、製品ドキュメント、サポートFAQで優位
オープンドメイン事実問合せ
高
中
一般知識QAではRAG継続が合理的
均質な表データ
中
低
表中心コーパスは階層化しづらく相性が悪い
部門横断コーパス
中
中〜高
領域境界が明確なほど探索型が効く
論文は、単一のエンタープライズ顧客サポートベンチマークで単発検索dense、hybrid、hierarchical retrieval、agentic RAGの4系統に対し明確な改善を報告しました。
11データセットの総合評価では、5データセットで勝ち、3データセットで同等、3データセットで負けています。勝てた条件は「単一ドメイン」「復元可能な主題分類が存在する」の2つが揃うコーパスです。
負けた条件は次のように整理されています。
オープンドメインの事実問合せ(Wikipedia的な知識QA)
均質な表データ(構造が水平で階層化しにくいもの)
読み方として重要なのは、平均勝率ではなく「自社コーパスがどちら側か」を判定する視点です。エンタープライズ社内文書は前者に近く、一般消費者向けQAは後者に近い傾向があります。
限界と注意点:オフライン圧縮の鮮度と再構築コスト
論文が明示している限界は次のとおりです。
オープンドメイン事実問合せや均質な表コーパスでは既存RAGに劣る
階層構造がそもそも復元しづらいコーパスには適さない
事前処理は一回限りではなく、コーパス更新に伴う再構築が必要
論文本文で扱われていない、実務上の注意点は次のとおりです。
コーパス更新頻度が高い環境では、階層再構築のパイプライン設計が必要
権限継承が必要な社内文書では、ノード単位のアクセス制御と整合させる必要がある
探索型はエージェントの推論回数が増えるため、レイテンシとトークン消費の管理が必要
複数言語混在コーパスでは、階層要約の言語ポリシーを事前に定める必要がある
ベンチマーク結果は特定モデル・特定設定でのものであり、モデル更新時に再評価が必要
「RAGを完全に置き換える」ではなく、「領域境界の明確なコーパスから段階的に切り替える」設計が現実的です。
実務への示唆:社内AI導入で使える判断チェックリスト
自社に導入するかを判断する際は、以下を順に確認します。
対象コーパスは単一ドメインか、部門横断でも領域境界が明確か
人が普段どの階層でナビゲートしているか(フォルダ、タグ、部門分類)
コーパス更新頻度と、再構築を許容できる運用体制はあるか
権限継承やアクセス制御の要件は、ノード単位で扱えるか
レイテンシ要件は、複数回のノード探索を許容できるか
事実問合せと領域絞込みQAの割合は、どちらが多いか
次のケースでは、RAG継続が合理的です。
事実問合せ中心(例:一般法令QA、外部知識検索)
均質な表・データベース中心のコーパス
コーパスに階層構造がなく、フラットなナレッジベース
次のケースでは、探索型検討が合理的です。
部門横断の社内文書検索で、領域が混線している
上位分類が明確で、人がフォルダで管理しているコーパス
現行RAGで「別領域の高類似チャンク混入」が問題化している
導入形態としては、いきなり全面置き換えではなく、部門・領域単位でRAGとCorpus2Skillを並走させ、指標で切り替える段階導入が現実的です。
Blackfordの見解:ナレッジ設計は「階層」と「検索」のハイブリッド
社内AIの現場では、「RAGを入れたが精度が伸びない」という相談が増えています。多くの場合、根本原因はコーパス側の階層設計と、AI側の検索設計が分離していること にあります。
Corpus2Skillの示唆は、AIモデルの改善よりも、コーパス側の階層を陽に持たせる設計が効くケースが存在するという点です。この論点は、社内文書ガバナンス、権限設計、部門横断ナレッジ運用と直結します。
Blackfordでは、DataRoidを含む社内データ基盤の設計を、次の観点で支援しています。
コーパスの階層設計と、権限・部門境界の整合
RAGと探索型を並走させる評価パイプラインの設計
コーパス更新頻度に応じた再構築とキャッシュ運用の設計
検索指標(Recall、Precision、根拠適合率)と業務指標の接続
論文が主張するように、探索型が万能ではありません。自社コーパスがどちら側に属するかを判定する評価設計こそ、AI導入の初期段階で必要な投資です。 DataRoid、DataRoid Cloudでは、この判定と段階導入を運用に載せるところまで支援します。
よくある質問
Q: Corpus2SkillはRAGを完全に置き換える技術ですか? A: 論文の11データセット評価では5勝3分3敗であり、置き換えではなく用途別の選択肢として扱うのが妥当です。単一ドメインで分類軸が明確なコーパスでは優位ですが、オープンドメイン事実問合せや均質な表データではRAGが依然優位です。
Q: コーパスを更新した場合、階層要約はどう扱いますか? A: 論文本文では大規模更新時のパイプラインは主題外ですが、実務では差分再構築の運用設計が必要です。更新粒度、再構築間隔、再構築中の応答方針を、社内ナレッジガバナンスと合わせて設計します。
Q: 中小企業でも導入は現実的ですか? A: 導入前提は、コーパスに復元可能な階層が存在することです。社内Wiki、部門フォルダ、製品文書などの階層が既に運用されていれば、段階的な検討対象になります。まずは部門単位でRAGとの並走比較から始めるのが安全です。
Q: 実装コードは公開されていますか? A: 論文の公式リポジトリはgithub.com/dukesun99/Corpus2Skill で公開されています。既存RAGスタックとの並走比較を、自社データで小規模に走らせられる状態です。
まとめ
Corpus2Skillは、社内ナレッジを「検索するもの」ではなく「探索するもの」として設計する視点を提示しました。全ケースでRAGを上回るわけではありませんが、単一ドメインで分類軸が明確なコーパスでは有力な選択肢になります。
ただし、11データセットのうち3データセットで負けている事実は無視できません。AI側の手法を選ぶ前に、自社コーパスがどちら側かを評価する設計が先行するべきです。
社内AI導入で、RAG改善に頭打ちを感じている場合は、コーパス階層設計と評価パイプラインから見直す価値があります。判断に迷う場合は、業務課題と現行検索の指標を持ち込んで相談してください。
Blackfordに相談する