VILA-Lab/Awesome-DLMs

The official GitHub repo for the survey paper "A Survey on Diffusion Language Models".

解决的问题

本项目旨在满足对扩散语言模型 (DLMs) 相关研究和资源进行集中化、实时更新的需求。它帮助研究人员和开发人员驾驭使用扩散技术(不同于传统的自回归模型)的文本生成模型这一快速发展的领域。

工作原理

它作为一个精选的知识中心,将学术论文、代码实现和项目演示组织成逻辑类别,例如“离散 DLMs”、“连续 DLMs”、“推理优化”和“训练策略”。该仓库通过里程碑时间线追踪领域的发展,并提供指向 arXiv 论文、GitHub 仓库和交互式网页演示的直接链接。

目标用户

本合集专为 AI 研究人员、机器学习工程师和学生设计,旨在帮助他们掌握基于扩散的文本生成领域的最新进展,涵盖从基础理论到最先进的推理加速技术。

亮点

  • 全面且频繁更新的研究论文和代码库列表。
  • 涵盖基础、训练、推理和多模态应用的分类章节。
  • 专门的“Playground”板块,展示各种扩散语言模型的实时演示。
  • 可视化时间线,展示从连续扩散模型到离散扩散模型的转变。
  • 收录了如 DARTree 等前沿研究,提升了解码速度和效率。

相关

  • 项目
  • 项目
  • 项目
  • 项目