KNOWLEDGE VAULT — TAG
タグ「RAG」
収蔵 13件
2026-11-19
検索拡張型LLMにおける「証拠の有用性」に基づく動的なクレジット割り当て(ECA)
Evidence-Based Credit Assignment for Search-Augmented Language Models
出典:Hugging Face Daily Papers(Upvotes: 2 | arXiv:2611.23824)
- 検索拡張型言語モデル(Search-Augmented LM)に対し、最終的な正誤報酬だけでなく、検索された証拠の有用性を評価する「Evidence-based Credit Assignment (ECA)」を提案。
- 従来のOutcome Supervisionでは「無意味な検索」も正解に寄与したと誤認されるが、ECAは凍結されたポリシーを用いて証拠の寄与度を分離評価することで、学習の効率を劇的に改善。
- MultiHop-RAGを含む複数の検索QAベンチマークにおいて、特にQwen2.5等の軽量モデルで顕著な精度向上(最大4.8pt)と、マルチホップ推論への強い汎用性を示した。
2026-11-19
基盤モデルへの「不確実性」の明示による推論精度の大幅な向上
Tell Me How Sure You Are: Communicating Uncertainty in Auxiliary Evidence to Foundation Models
出典:arXiv cs.LG (Machine Learning)(Authors: Soumyajit Chatterjee, Baturalp Buyukates, Abhirup Ghosh | 2026-11-18)
- LLM/VLMへの補助情報(Context)を注入する際、その情報の「不確実性」を併せて伝える手法の有効性を実証。
- 不確実性を伝達することで、従来のプロンプト手法と比較してMacro-F1スコアを最大26.18ポイント改善。
- 人間による主観的な不確実性および学習モデルによる予測不確実性の両方が、下流の意思決定を正しく導く。
2026-11-18
法的推論の核心を突く:検索と長文生成を統合したドイツ公法試験ベンチマーク「GPBam」の構築
GPBam: A Retrieval-Aware German Public Law Exam Benchmark
出典:Hugging Face Daily Papers(Upvotes: 0 | arXiv:2611.18981)
- ドイツ公法試験(Gutachten)を模した、法的根拠の特定と論理構築を統合評価する新ベンチマーク「GPBam」の提案。
- 単なる知識の暗記ではなく、法規範の「検索(Retrieval)」と「長文生成(Long-form Generation)」の相関を定量化。
- 法務AIにおいて、検索精度の向上が最終的な論理構築のスコアにどの程度寄与するかを評価する際に極めて有効。
2026-11-17
AISTATS 2027 採択論文の査読結果に関するコミュニティ議論
AISTATS 2027 paper discussion [D]
出典:Reddit r/MachineLearning(ML Research Community)
- AISTATS 2027に投稿された論文の査読結果(Reviews)の公開に伴う議論。
- 特定の技術革新ではなく、最新の査読傾向やコミュニティの反応を収集するフェーズ。
- 特定のアルゴリズムへの適用ではなく、最新のSOTA研究動向を把握するための情報収集として機能する。
2026-11-16
MIRIX-2.0:多エージェント協調とハイパーグラフによる高精度・低遅延な長期記憶システム
MIRIX-2.0: Multi-Agent Memory System
出典:Hugging Face Daily Papers(Upvotes: 4 | arXiv:2611.12068)
- LLMエージェントの長期記憶(パーソナライズ、一貫性、再利用)を最適化する多エージェント記憶システム「MIRIX-2.0」の提案。
- 既存手法(HyperMem等)に対し、ハイパーグラフによる引用構造と予算制検索を導入することで、精度を劇的に向上させつつ検索コストの増大を抑制。
- ドキュメントQA(単一・多段ホップ)、プロシージャルなタスク(WebShop, ALFWorld)、および複雑なスキル習得(MetaClaw-Bench)で圧倒的な優位性を示す。
2026-11-16
多言語Wikipediaの時系列変化を捉える、システムバージョン管理とベクトル検索を統合したクロスリンガル比較基盤
Hackathon project for MariaDB's Wikipedia Through Time challenge: matching sentences across seven Wikipedia editions at any past date [P]
出典:Reddit r/MachineLearning(ML Research Community)
- 多言語Wikipediaの全履歴をシステムバージョン管理テーブルに格納し、任意の過去時点での文単位の差異を抽出するシステム。
- bge-m3による埋め込みとHNSWインデックスを組み合わせ、SQLレベルで「時系列移動」と「多言語ベクトル類似度」を統合。
- LLM(Gemini 1.5 Flash)を判定器として使い、単なる類似度を超えた「矛盾・部分一致・翻訳」の高度な意味解析を実現。
2026-11-15
LangChainが評価額30億ドルを突破:Agent管理プラットフォーム「LangSmith」の急成長
AI agent startup LangChain hits $3B valuation
出典:TechCrunch AI(AI Industry)
- LLMオーケストレーションのデファクトスタンダードであるLangChainが、評価額30億ドルに到達。
- モデルやプラットフォームに依存しないAgent管理ツール「LangSmith」が7,000社に導入され、開発の標準化を加速。
- 複雑なマルチステップの推論(Chain of Thought)や、動的なツール利用を伴うAgent構築のデバッグ・評価において極めて強力。
2026-11-15
多言語環境における「ナラティブの偏り」を克服するLLM評価基盤:NarrativeBenchの構築
The Narrative Gap: Can LLMs Help Us Navigate Diverse Narratives Across Languages?
出典:Hugging Face Daily Papers(Upvotes: 2 | arXiv:2611.12750)
- 多言語・多地域にまたがる「相反するナラティブ(語り)」をLLMが適切に提示・識別できるかを評価する研究。
- 既存のLLMは多様な視点の提示を求められても、言語やクエリの枠組みによって情報の偏り(エコーチェンバー)を生む課題を特定。
- 23言語・23の論争的トピックを含む「NarrativeBench」を用い、情報の公平性と網羅性を定量評価する。
2026-11-15
LongMemEval-Sにおけるメモリ検索の飽和とTop-K抽出のトレードオフ分析
LongMemEval-S: 96.0% with the official judge, and what top-5 vs top-20 retrieval changes [R]
出典:Reddit r/MachineLearning(ML Research Community)
- LongMemEval-Sベンチマークにおいて、独自のメモリ検索(Papr)を用いて96.0%の正解率を達成した報告。
- 検索の再現率(Recall)は既に飽和状態にあり、エラーの主因は検索ではなく「読解(Reader)」の能力にあることを特定。
- Top-5からTop-20への拡張は純増が少なく、トークン効率と精度のバランスを考慮した最適化が重要となる。
2026-11-14
LLMのコンテキスト寄与度を高速推定する「スキッチング」アルゴリズム
Sketching Language Models for Context Attribution
出典:arXiv cs.LG (Machine Learning)(Authors: Christopher Liaw, Aranyak Mehta, Grigoris Velegkas et al. | 2026-11-12)
- プロンプトの一部を削除した際のLLMの出力変化(Leave-One-Out Attribution)を高速に推定する手法の提案。
- 従来の$n$回の推論を要する計算を、安定性仮定の下で$O(\sqrt{\log(1/\varepsilon)}/\varepsilon)$の評価回数に劇的に削減。
- 長大なコンテキストを持つLLMにおいて、特定のトークンが推論に与える影響度(寄与度)を効率的に解析する際に威力を発揮。
2026-11-09
ゴールドマン・サックスによるClaude Code導入撤回:金融機関におけるLLM利用のガバナンスとリスク管理
Goldman Sachs is pulling Claude Code from its bankers and traders
出典:Hacker News (Top Stories)(HN Score: 468 pts by TheWiggles)
- 大手金融機関(ゴールドマン・サックス)が、銀行員やトレーダーへのClaude Code(AIエージェント)の提供を停止したニュース。
- 技術的な性能不足ではなく、機密情報の流出リスクやAIの自律的な意思決定に対するガバナンス・コンプライアンスの壁が浮き彫りになった。
- 高精度な推論を求める金融実務において、LLMの「ブラックボックス性」と「データ保護」をいかに両立させるかが最重要課題となる。
2026-11-08
オフラインRAGにおけるテキストとベクトルの一貫性欠落:攻撃への脆弱性と対策
Signed but Steerable: Measuring and Closing the Text-Vector Integrity Gap in Offline Retrieval-Augmented Generation
出典:Hugging Face Daily Papers(Upvotes: 2 | arXiv:2611.06498)
- 本研究は、エッジデバイスで利用されるオフラインRAGシステムにおける、テキストとベクトル表現の一貫性欠落(text-vector integrity gap)に着目し、その脆弱性を分析した。
- 攻撃者は、ベクトルを改ざんすることで、検索結果を操作し、誤った情報を提示できる可能性があり、既存の単純な検証手法では十分な防御ができない。
- 量子化されたベクトルストアの監査や、浮動小数点数演算の再現性問題など、RAGシステムのセキュリティに関する新たな課題を提示し、対策を提案している。
2026-11-08
科学的再発見のためのLLM評価基盤:OpenFrontiersによる科学的推論能力の定量的評価
OpenFrontiers: A Collection of Open Research Problems and a Benchmark for Scientific Rediscovery
出典:Hugging Face Daily Papers(Upvotes: 4 | arXiv:2610.37739)
- * 科学的課題(数千の証明を含む)に対するLLMの能力を評価するベンチマーク「
このページの要約は、収集パイプラインが自動生成した digest(要約)です。内容の正確なところは、必ず各項目の出典リンク先の原文で確認してください。出典の本文そのものは掲載していません。ジャンル分けも自動分類のため、周辺の話題が混ざることがあります。