DLM文本嵌入扩展与蒸馏研究

2026年10月1日，Hugging Face Daily Papers 收录论文《扩散语言模型中用于提升可扩散性的文本嵌入向量扩展与蒸馏》。报道称，研究发现，在连续扩散语言模型（DLM）中，将嵌入模型从 T5 扩展到 T5Gemma-1、T5Gemma-2，可显著提升生成性能；但原始 T5Gemma-2 嵌入过于判别化，容易导致无效嵌入。当前报道仅披露了上述研究发现，未提供更多实验细节或后续进展。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。