沃资讯
科技 财经 汽车 游戏 数码 资讯 商业

阿里通义千问推出Qwen2.5-Turbo,长上下文AI模型能力再升级!

2024-11-19来源:ITBEAR编辑:瑞雪

近期,阿里通义千问在其官方平台上发布了一项重大更新,正式推出了Qwen2.5-Turbo开源AI模型。这一新模型在历经数月的精心优化后,终于面向广大社区用户亮相。

Qwen2.5-Turbo的最大亮点在于其显著提升了上下文长度的处理能力。相较于之前的版本,该模型将上下文长度从12.8万个tokens大幅扩展至100万个tokens,这一改进意味着它能够处理约100万英语单词或150万汉字的文本内容,足以容纳10部完整的小说、150小时的演讲稿,或是30000行代码。

在自然语言处理(NLP)领域,大型语言模型(LLM)的上下文长度是一个至关重要的指标。它决定了模型在一次处理过程中能够考虑和生成的文本的最大长度。Qwen2.5-Turbo在这一方面的突破,无疑为其在处理长文本任务时提供了更大的优势和灵活性。

在性能表现上,Qwen2.5-Turbo同样不负众望。在1M-token的Passkey检索任务中,该模型实现了100%的准确率,而在RULER长文本评估中,其得分也高达93.1,成功超越了GPT-4和GLM4-9B-1M等业界知名模型。

为了进一步提升处理效率,Qwen2.5-Turbo还整合了稀疏注意力机制(sparse attention mechanisms)。这一机制使得模型在处理100万tokens文本时,从输入到输出第一个token的时间从4.9分钟缩短至68秒,速度提升了4.3倍。这一显著的效率提升,使得Qwen2.5-Turbo在处理长文本时更加迅速和高效。

除了性能上的提升,Qwen2.5-Turbo在经济性方面也表现出色。其处理成本保持在每百万个tokens 0.3元的水平,能够处理3.6倍于GPT-4o-mini的token数量。这一优势使得Qwen2.5-Turbo在长上下文处理解决方案中更具竞争力,成为用户们的高效、经济之选。

然而,尽管Qwen2.5-Turbo在多个基准测试中取得了优异的成绩,其团队仍然保持着清醒的头脑。他们意识到,在真实场景中的长序列任务表现可能还存在不够稳定的问题,同时大型模型的推理成本也还有进一步优化的空间。

对此,Qwen2.5-Turbo的团队承诺将继续努力,不断优化模型的人类偏好、提高推理效率,并探索更强大的长上下文模型,以满足用户们日益增长的需求和期待。

亚辉龙回应涉足脑机接口:合作方产品多在研,技术路线与Neuralink不同
6日晚,亚辉龙(688575.SH)发布自愿披露签署战略合作框架协议的补充公告称,脑机星链成立时间短,规模较小,目前在睡眠产品方向主要开发产品有脑电采集分析仪、脑机接口助眠仪、脑机接口睡眠监测仪、迷走神经刺激…

2026-01-07

ROG XREAL R1登场:240Hz刷新率开启电竞AR眼镜新体验
1月7日消息,在CES 2026国际消费电子展上,ROG玩家国度与XREAL联合打造的ROG XREALR1正式亮相,它也是全球首款搭载240Hz电竞AR眼镜。 还联合Bose打造的3D声效系统,能精准还原…

2026-01-07

马斯克深度访谈:2026年AGI或成现实,AI引领人类迈向富足新纪元
视频中,马斯克与主持人Peter Diamandis及投资人Dave Blundin共同探讨人工智能、机器人、经济转型、能源、教育、医疗及太空探索等热点议题。他将AI与机器人技术的迅猛发展比作“超音速海啸”,…

2026-01-07

新址新篇·智联未来|斯沃德科技乔迁科学城开启发展新征程
手持金剪刀的领导们,共同为斯沃德科技的新旅程剪开了一条通向辉煌的大道,这一刻象征着斯沃德科技未来无限的可能性与光明前景。斯沃德科技此次乔迁,不仅大幅提升了办公环境品质,更为公司汇聚全球顶尖科研人才、深化产学研…

2026-01-07