KNOWLEDGE VAULT — TAG

タグ「ファインチューニング」

収蔵 31件
2026-11-19

「Attention at Absolute Zero」:ソフトアテンションの限界を打破する「零度(Zero Temperature)」の高次推論層

Attention at Absolute Zero

出典:Hugging Face Daily Papers(Upvotes: 2 | arXiv:2611.11937)

2026-11-19

シミュレータの「不正確な自信」を暴く:Sim-to-Realにおける過信とバックボーン適応の非対称性

Unreasonable Confidence from Simulator Misspecification: Directional Robustness on the SPEED+ Sim-to-Real Benchmark

出典:Hugging Face Daily Papers(Upvotes: 1 | arXiv:2611.20321)

2026-11-19

Ambient SFT:温度調整による「事前学習の知識」を維持した高効率な微調整手法

Ambient LLMs: Data-Efficient Supervised Fine-tuning via Temperature Matching

出典:arXiv cs.LG (Machine Learning)(Authors: Giannis Daras, Marios Papachristou, Adam Klivans et al. | 2026-11-17)

2026-11-19

LogT:論理的思考を組み込んだ自動データ生成による、高効率な視覚検索・ツール利用の最適化

LogT: Logically Think with Images for Visual Search

出典:Hugging Face Daily Papers(Upvotes: 1 | arXiv:2611.19200)

2026-11-19

ブラックボックス生成モデルに対応する「歪みゼロ」のセマンティック・ウォーターマーク技術

Distortion-Free Semantic Watermarks for Black-Box Generative Models

出典:arXiv cs.LG (Machine Learning)(Authors: Aviv Yossef, Or Patashnik, Or Zamir | 2026-11-17)

2026-11-18

法的推論の核心を突く:検索と長文生成を統合したドイツ公法試験ベンチマーク「GPBam」の構築

GPBam: A Retrieval-Aware German Public Law Exam Benchmark

出典:Hugging Face Daily Papers(Upvotes: 0 | arXiv:2611.18981)

2026-11-18

レガシーコードの進化と構造解析:VisualBasic.Worldによるソースコードの歴史的変遷

VisualBasic.World: A gallery of Planet Source Code programs from 1997 to 2012

出典:Hacker News (Top Stories)(HN Score: 153 pts by broast)

2026-11-18

多言語対応の意思決定モデル「Zuse」:凍結ベースとポインターヘッドによる高精度な分類と較正の分析

Zuse: A Decision Model for European Languages

出典:Hugging Face Daily Papers(Upvotes: 0 | arXiv:2611.06238)

2026-11-17

「Lattice of Latents」:計算状態の水平拡張による次世代の推論能力強化

Latent Lattice Language Models

出典:arXiv cs.LG (Machine Learning)(Authors: Shivam Duggal, Zongze Wu, William T. Freeman et al. | 2026-11-16)

2026-11-17

希少言語「Even」への対応:トークナイザー拡張とLoRAを用いたマルチモーダル学習の最適化

EvenVLM: A Text and Multimodal Dataset for the Even Language with Vision-Language Fine-Tuning

出典:Hugging Face Daily Papers(Upvotes: 1 | arXiv:2611.16500)

2026-11-17

AISTATS 2027 採択論文の査読結果に関するコミュニティ議論

AISTATS 2027 paper discussion [D]

出典:Reddit r/MachineLearning(ML Research Community)

2026-11-17

Baggingを用いたCoT学習の理論的最適化:推論長に依存しないサンプル複雑度の達成

Optimal Autoregressive Chain-of-Thought Learning via Bagging

出典:arXiv cs.LG (Machine Learning)(Authors: Awni Altabaa, John Lafferty, Omar Montasser | 2026-11-16)

2026-11-16

NVIDIAの動向とAIエコノミーの相関性:ハードウェア依存の構造的リスク

Is bad news for Jensen Huang also bad news for the AI industry?

出典:TechCrunch AI(AI Industry)

2026-11-16

自律型AIエージェントの自己更新における「証拠に基づく採用」フレームワーク(EGE)

Evidence-Governed Adoption of Self-Generated Updates in Autonomous AI Agents

出典:Hugging Face Daily Papers(Upvotes: 9 | arXiv:2611.16378)

2026-11-16

直交ヌル空間投影によるLLMの「忘却」と「汎用性能」の分離:軽量アダプタを用いた知識削除技術

Disentangling Forgetting from Utility: Lightweight LLM Unlearning via Orthogonal Null-Space Projection

出典:arXiv cs.LG (Machine Learning)(Authors: Xiuyuan Wang, Weiming Liu, Zongxin Yang et al. | 2026-11-13)

2026-11-16

マルチモーダル学習におけるVision Encoderの「必須要素」を解体:事前学習の不要性とVision専用パラメータの重要性

[Meta FAIR + NYU] Unbundling Multimodal Vision Encoding: training 200+ MLLMs to find encoder pretraining is optional but vision-only parameters are not [R]

出典:Reddit r/MachineLearning(ML Research Community)

2026-11-16

MoEにおける「局所的な誤差改善」と「最終出力の精度」の乖離:多段階推論におけるエキスパート共有の理論的境界

From Local Prediction Error to Final Outputs: A Theory of Expert Sharing in Multi-Step Reasoning

出典:arXiv cs.LG (Machine Learning)(Authors: Tiantong Wang, Zhiren Gong, Yixin Wang et al. | 2026-11-13)

2026-11-15

LLMアーキテクチャの「試行錯誤」を資産化する:スケーリング則を用いた検証プラットフォームArchSpace

ArchSpace: Recording, Reviewing, and Referencing LLM Architecture Research

出典:arXiv cs.LG (Machine Learning)(Authors: Jie Wang, Tong Zhu, JiaHao Kuang et al. | 2026-11-12)

2026-11-14

LoRAと合成データを用いたTransformerによる連続血糖値(CGM)予測モデルの構築

I have trained a model to predict my blood sugar [P]

出典:Reddit r/MachineLearning(ML Research Community)

2026-11-14

Agentic Semi-Supervised Learning (AgentSSL): LLMエージェントによる自己教師あり学習プログラムの自動探索

AgentSSL: Can MLE Agents Leverage Unlabeled Data?

出典:arXiv cs.LG (Machine Learning)(Authors: Ethan Lin, Akanksha Sarkar, Ziang Liu et al. | 2026-11-12)

2026-11-09

軽量なVision EncoderとLSTMゲートを統合したローカルVLAモデルの構築

Locally trained VLA model with minimal attention based vision encoder. [p]

出典:Reddit r/MachineLearning(ML Research Community)

2026-11-09

重み空間プログラミング(WSP):勾配更新を介さない超高効率なモデル編集と汎化性能の探求

Exploring Weight-Space Programming: Capabilities, Generalization, and Limitations

出典:Hugging Face Daily Papers(Upvotes: 3 | arXiv:2611.09382)

2026-11-09

LoRAスタックのマージと条件付け(Conditioning)の長さ不一致による出力スキップ問題

LoRA-conditioned model skips the first line of its output when the caption is short. Any idea why? [D]

出典:Reddit r/MachineLearning(ML Research Community)

2026-11-09

GAP (Gated Attention Projection): AttentionとMLPを統合しパラメータを最大34%削減する新アーキテクチャ

I merged attention and MLP processing into a single gated Transformer block. GAP [R]

出典:Reddit r/MachineLearning(ML Research Community)

2026-11-08

DOME:生物学における教師あり機械学習の検証のための推奨事項

DOME: Recommendations for supervised machine learning validation in biology

出典:arXiv Core: Causal Inference, Double ML & Graph Laplacian(Authors: Ian Walsh, Dmytro Fishman, Dario Garcia-Gasulla et al. | 2020-06-25)

2026-11-08

オンライン偽ニュース検出における機械学習モデルのベンチマーク研究

A Benchmark Study of Machine Learning Models for Online Fake News Detection

出典:arXiv Core: Causal Inference, Double ML & Graph Laplacian(Authors: Junaed Younus Khan, Md. Tawkat Islam Khondaker, Sadia Afroz et al. | 2019-05-12)

2026-11-08

量子化誤差の補償:相互補完のための階層的重み構造の導入

Compensate Quantization Errors: Make Weights Hierarchical to Compensate Each Other

出典:arXiv Core: LLM Quantization, Distillation & Test-Time Compute(Authors: Yifei Gao, Jie Ou, Lei Wang et al. | 2024-06-24)

2026-11-08

LoRAにおけるスペクトル・サブスペースダイナミクス解析:SFTとRLの共通基盤と最適化戦略

Spectral and Subspace Dynamics of LoRA in Supervised Fine-Tuning and Reinforcement Learning

出典:arXiv 2026: Tabular & Time-Series ML(Authors: Chenruo Liu, Zihan Wang, Yijun Dong et al. | 2026-11-05)

2026-11-08

量子化を考慮した学習(QAT)におけるスケーリング則

Scaling Law for Quantization-Aware Training

出典:arXiv Core: LLM Quantization, Distillation & Test-Time Compute(Authors: Mengzhao Chen, Chaoyi Zhang, Jing Liu et al. | 2025-05-20)

2026-11-08

Microsoft Research AI Frontiers部門の閉鎖と、研究の「実用・商業化」へのシフト

The end of Microsoft Research's AI Frontiers group

出典:Hacker News (Top Stories)(HN Score: 417 pts by srean)

2026-11-08

ニューラルネットワークの重み補間における一時的な精度向上現象(BUMP)とその活用によるアンサンブル手法の提案

BUMP: Brief Unexpected Mid-Interpolation Peak

出典:arXiv stat.ML (Statistical ML)(Authors: Melinda Flóra Kiss, Márton Muntag, Adrián Csiszárik et al. | 2026-11-05)

このページの要約は、収集パイプラインが自動生成した digest(要約)です。内容の正確なところは、必ず各項目の出典リンク先の原文で確認してください。出典の本文そのものは掲載していません。ジャンル分けも自動分類のため、周辺の話題が混ざることがあります。