/
训练策略 关键字列表
NJU联合腾讯提出VITA-1.5！GPT-4o级别的实时视觉语音交互框架！
本文提出了一种精心设计的分阶段训练方法，逐步训练大型语言模型以理解视觉和语音信息，最终实现流畅的视觉和语音交互。我们的方法不仅保留了强大的视听能力，而且无需单独的自适应语音识别（ASR）和文本到语音（TTS）模块，就能实现高效的语音转语音对话能力，显著加快了多模态端到端的响应速度。
2024-03-12
DeepSeek-VL：深度求索的多模态大模型
DeepSeekVL是一款开源多模态模型，通过对训练数据、模型架构和训练策略的联合拓展，构建了7B与1.3B规模的强大模型。相关资源可通过论文链接、模型下载页面和GitHub主页获取。
白皮书
京公网安备 11010802021500号
