专栏名称: AI寒武纪
Attention Is All You Need
今天看啥  ›  专栏  ›  AI寒武纪

Qwen2.5-Turbo上下文扩展至百万token:更大更强的也在路上

AI寒武纪  · 公众号  ·  · 2024-11-19 12:47
    

文章预览

阿里大模型重要一步!通义千问2.5-Turbo来了!之前大家抱怨上下文太短,现在直接上百万token!什么概念?10部长篇小说、150小时语音转录、3万行代码,都能一口气塞进去!这还没完,阿里说还将推出更大更强长上下文模型 话不多说直接上Qwen2.5-Turbo的表现: Qwen2.5-Turbo@表现 🚀  速度更快:  处理百万token,首个token输出时间从4.9分钟缩短到68秒!4.3倍的加速 💰  价格更低:  还是 ¥0.3 / 百万token!同样的价格,比GPT-4o-mini多处理3.6倍的token! 📚  上下文更长:  百万token上下文,相当于一百万英文单词或一百五十万汉字!写小说、写代码、分析超长文本,都轻轻松松 在RULER、LV-Eval和LongbenchChat等长文本理解数据集上,Qwen2.5-Turbo表现出色,吊打其他开源的百万token上下文模型!和GPT-4o-mini和Qwen2.5-14B-Instruct相比,短文本任务性能差不多,但上下文长度 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览