重磅！第二代Qwen大模型开源，阿里巴巴一口气开源了30个模型，其中Qwen1.5-72B在MT-Bench评分仅次于GPT-4

629 0 0

作者信息

【原文作者】 DataLearner
【作者简介】 关注数据科学关注科技行业关注人工智能关注一切促进人类生活美好的新技术
【微信号】 data_learner

文章摘要

以下是加粗后的文本：

阿里巴巴开源了一系列名为Qwen的大语言模型，并在2023年8月首次公开了一个拥有70亿参数的版本。在接下来的几个月里，该公司陆续发布了四个不同规模的模型，包括一个最小规模为18亿参数和一个最大规模为720亿参数的版本。现在，阿里巴巴已经发布了他们第二代的Qwen系列大语言模型（或称为1.5代）。

Qwen2系列大模型包含了六个不同参数规模的版本，分别为5亿、18亿、40亿、70亿、140亿和720亿。每个版本的模型都提供了基础预训练版本、聊天优化版本、Int4量化、Int8量化以及AWQ版本，共计30个版本的模型。这些模型被官方称为Qwen2-beta版本，但在本次发布时更名为Qwen1.5。

Qwen1.5系列模型的特点包括：
1. 提供6个不同参数模型版本（0.5B, 1.8B, 4B, 7B, 14B 和 72B），最小的仅5亿参数，最大的有720亿参数；
2. 聊天优化版本的模型相比第一代模型有明显进步，其中720亿参数的Qwen1.5-72B在MT-Bench得分仅次于GPT-4；
3. 基座版本和聊天版本在多语言方面的能力得到增强，包括中英文在内，共支持12种语言；
4. 所有版本模型最高支持32K的长上下文输入；
5. 支持系统提示，可以完成Roleplay；
6. 生态完善，发布即支持vLLM、SGLang等推理加速框架；
7. 支持不同的量化框架；
8. 月活1亿以下直接商用授权，月活1亿以上商用需要获取授权。

官方公布的Qwen1.5系列模型在不同评测结果上的得分情况显示，Qwen1.5模型具有竞争力。然而，与第一代相比，72B模型的提升并不高。此外，小规模版本的模型对比显示，40亿参数规模的Qwen1.5-4B最强，但其参数规模也相对较高。

Qwen1.5最亮眼的表现是在MT-Bench上的得分，其中Qwen1.5-72B模型的MT-Bench得分8.61，仅次于GPT-4模型。

在实际测试中，Qwen1.5-72B模型在一些问题上表现不佳，这可能是因为这些问题本身就具有挑战性。尽管如此，该模型在其他任务中的表现仍然可圈可点。

Qwen2系列模型的开源地址如下：
– Qwen1.5-0.5B-Chat: https://www.datalearner.com/ai-models/pretrained-models/Qwen1_5-0_5B-Chat
– Qwen1.5-1.8B-Chat: https://www.datalearner.com/ai-models/pretrained-models/Qwen1_5-1_8B-Chat
– Qwen1.5-4B-Chat: https://www.datalearner.com/ai-models/pretrained-models/Qwen1_5-4B-Chat
– Qwen1.5-7B-Chat: https://www.datalearner.com/ai-models/pretrained-models/Qwen1_5-7B-Chat
– Qwen1.5-14B-Chat: https://www.datalearner.com/ai-models/pretrained-models/Qwen1_5-14B-Chat
– Qwen1.5-72B-Chat: https://www.datalearner.com/ai-models/pretrained-models/Qwen1_5-72B-Chat