HomeTags#distillation

Tag timeline

#distillation 2 total

同じキーワードで束ねられた更新を確認できます。カテゴリをまたいだ関連ニュースや実装トピックの追跡に使えます。

Total 2
Showing 2
Page 1/1
Updated 1h ago

Entries page 1/1 · 2 total

Wed, May 27 1 entries
paper research 3w ago · arxiv-cs-cl

Self-Verified Distillation:言語モデルは密かに自分自身の合成データパイプラインである Self-Verified Distillation: Your Language Model Is Secretly Its Own Synthetic Data Pipeline

重要度 Medium Medium priority 重要度 Medium · 論文/研究 · Papers / Benchmarks Medium priority · paper/research · Papers / Benchmarks 公開 5月27日 Published May 27

AI要約 外部教師なしでLLM自身がラベルなしプロンプトから合成データを生成・自己検証し、さらに性能を向上させる蒸留手法を提案した研究。

EN arXiv:2605.26132v1 Announce Type: new Abstract: Can post-trained large language models (LLMs) further improve themselves using only unlabeled prompts, without external teachers or feedback from tools?

Self-Verified Distillation: Your Language Model Is Secretly Its Own Synthetic Data Pipeline og fallback
Wed, Jan 28 1 entries
blog local-llm 4mo ago · huggingface-blog

ClaudeでCUDAカーネルを自動生成し、オープンモデルへ蒸留する取り組みをHugging Faceが公開 We Got Claude to Build CUDA Kernels and teach open models!

重要度 Medium Medium priority 重要度 Medium · 技術記事 · Local LLM / Open Models Medium priority · technical post · Local LLM / Open Models 公開 1月28日 Published Jan 28

AI要約 Hugging FaceがClaudeを用いてCUDAカーネルを自動生成し、その知識をオープンモデルへ蒸留するワークフローを公開した。

EN We Got Claude to Build CUDA Kernels and teach open models!

fallback