AI21推出Jamba,这是世界上首个基于Mamba的生产级模型。Jamba结合了Mamba结构化状态空间(SSM)技术和传统的Transformer架构的元素,弥补了纯SSM模型固有的局限。
Jamba:首个Mamba的生产级模型 开创性的SSM – Transformer架构
-
by 小互
- Categories: XiaoHu.AI日报
Related Content
Meta AI提出了一种新的语言模型架构“Large Concept Model (LCM) 让模型更像人类思考
by
小互
2024年12月25日
阿里巴巴推出QVQ-72B 一个基于Qwen2-VL-72B的新型多模态推理模型
by
小互
2024年12月25日
Fireworks AI新功能 能够将图像或PDF等非文本内容转化为LLM可理解的结构化文本
by
小互
2024年12月24日
Hume AI推出全能文本与语音引擎 OCTAVE 根据文本实时生成特定人格特质的声音
by
小互
2024年12月24日
Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型
by
小互
2024年12月23日