今日开源（2024-10-21）：DeepSeek发布Janus1.3B，统一多模态理解和生成，新颖自回归框架，解耦设计提升性能

文章预览

🏆基座模型 ①项目：Janus ★ Janus 是一个新颖的自回归框架，统一了多模态理解和生成。通过将视觉编码解耦为独立路径，同时利用单一的统一Transformer架构进行处理，解决了以往方法的局限性。 Janus不仅缓解了视觉编码器在理解和生成中的角色冲突，还增强了框架的灵活性。其简单性、高灵活性和有效性使其成为下一代统一多模态模型的有力候选者。 ☆一键收藏： https://sota.jiqizhixin.com/project/janus ②项目：Spirit-LM ★ Spirit-LM 是一个混合语音和书面语言模型，旨在处理和生成语音与文本的混合输入。 该项目提供了模型权重、推理代码和评估脚本，支持语音标记化和语音文本情感保留基准测试。 ☆一键收藏： https://sota.jiqizhixin.com/project/spirit-lm 🛠️框架平台、必备工具 ①项目：Qwen 2.5 Code Interpreter ★ Qwen 2.5 Coder 1.5B with Code Interpreter 是一个结合了 Qwen ………………………………