沃资讯
科技 财经 汽车 游戏 数码 资讯 商业

Meta推出Llama API,携手Cerebras和Groq打造超高速AI推理方案

2025-04-30来源:ITBEAR编辑:瑞雪

在科技界的瞩目下,meta公司在首届LlamaCon大会上不仅推出了独立的AI应用,还解锁了一项重要资源——Llama API,目前正以免费预览模式面向全球开发者开放。

据悉,Llama API为开发者提供了测试最新模型的机会,包括备受期待的Llama 4 Scout和Llama 4 Maverick。为了简化开发流程,meta公司特别设计了一键API密钥创建功能,并配备了轻量级的Type和Python SDK。这些举措使得开发者能够迅速上手,无需繁琐的配置。

更为贴心的是,Llama API完全兼容OpenAI SDK,为那些计划从OpenAI平台迁移应用的开发者提供了极大的便利。这意味着他们可以在不改变原有开发习惯的前提下,轻松切换至Llama API,享受meta带来的技术红利。

为了进一步提升Llama API的性能,meta携手Cerebras和Groq两大技术巨头展开合作。Cerebras宣称,其Llama 4 Cerebras模型的tokens生成速度高达2600 tokens/s,这一速度远超传统GPU解决方案,如NVIDIA,达到了18倍的领先优势。

根据Artificial Analysis的基准测试数据,Cerebras的这一速度不仅超过了ChatGPT的130 tokens/s,更是DeepSeek的25 tokens/s的数十倍之多。Cerebras的CEO兼联合创始人Andrew Feldman对此表示:“我们非常自豪能够让Llama API成为全球最快的推理API。在构建实时应用时,开发者对速度有着极高的要求,Cerebras的加入使得AI系统的性能达到了GPU云无法比拟的高度。”

而Groq提供的Llama 4 Scout模型虽然速度略逊于Cerebras,但也达到了460 tokens/s,相比其他GPU方案快了4倍。在费用方面,Groq上的Llama 4 Scout每百万tokens输入费用为0.11美元,每百万tokens输出费用为0.34美元;而Llama 4 Maverick的对应费用则分别为0.50美元和0.77美元。这些数据显示出Groq在提供高性能的同时,也保持了较低的成本。

此次meta推出的Llama API及其与Cerebras和Groq的合作,无疑为AI领域注入了新的活力。随着技术的不断进步和成本的进一步降低,AI应用将更加广泛地渗透到各个领域,为人类社会的发展带来前所未有的变革。

光联携手利元亨,共话新能源制造AI时代网络新路径与新机遇
聚焦企业在全球范围内的多分支互联与云IDC接入问题,方案基于光联自建全球光纤骨干网络及华为SD-WAN设备,支持MPLS、Internet与4G/5G等多种链路融合,并可弹性部署多种拓扑模型,实现总部、分支…

2025-11-15

TLKS-PMG-TP装置:全天候精准监测,守护输电线路“体温”安全
TLKS-PMG-TP输电线路线夹及导线温度在线监测装置应运而生,以其高精度测温与全时段监测能力,为输电线路装上了一双“精准温控眼”。 TLKS-PMG-TP装置不仅提供实时监测,更实现了输电线路运维的智能…

2025-11-15

Gartner发布2026十大技术趋势:AI主导变革,从“大而全”迈向“精而实”
近日,商业与技术洞察公司Gartner发布了2026年十大战略技术趋势:AI超级计算平台、多智能体系统、特定领域语言模型、AI安全平台、AI原生开发平台、机密计算、物理AI、前置式主动网络安全、数字溯源,以及…

2025-11-14

广电卡适配指南:哪些手机能用?这些旗舰机型可能不兼容!
华为P50系列是个特例,即便是4G版,也能通过软件方案支持广电5G。中国广电表示,近六年主流手机型号均已升级适配广电网络,98%以上的新入网5G手机支持700MHz频段。 判断你的手机是否适配广电卡,不仅…

2025-11-13

Kernelcom“智能键盘”来袭:12.5英寸超宽屏,AMD/Intel双版本可选
快科技11月12日消息,近日一款名为Kernelcom的设备正在Kickstarter上众筹,虽然其本质上是一款功能完备的笔记本电脑,但制造商还是将其宣传为“智能键盘”。 这款设备最大的特点是其12.5英寸超…

2025-11-13

山海星耀攻克超低轨难题,以硬核技术逐梦空天新蓝海
天虎科技了解到,虽然当前市场上有一些针对超低轨的吸气式推进器,但从气体收集率、推进效率、测试工作环境等维度上,山海星耀的电推进器均具备一定优势。 蔡东升表示,目前该产品是商业航天公司首次实现了“高真空运行环…

2025-11-12

Viwoods发布AiPaper Reader电纸书:6.13英寸墨水屏搭载AI阅读互动功能
IT之家 11 月 11 日消息,据科技媒体 NoteBook Check 今天报道,Viwoods 现已推出 AiPaper Reader电纸书,运行 Android 16 操作系统,机身配备专用 AI …

2025-11-12

海外游语言障碍终结者:时空壶新T1离线翻译,精准适配复杂场景
时空壶新T1翻译机凭借端侧AI翻译技术与全面的离线功能配置,成为假期中解决无网沟通难题的关键设备,其技术设计精准匹配了海外旅行中的复杂网络环境。这种“离线核心+在线补充”的双模式设计,精准命中了国庆海外游中“…

2025-11-11

苹果换新机数据迁移难?5种实用方法,简单操作轻松搞定数据转移!
方法一、“快速开始”直接传输这是苹果官方自带的工具,专门针对新手机未激活时迁移旧机数据设计,能直接把旧 iPhone的几乎所有数据完整搬到新手机,包括照片、联系人、短信、视频、APP等,不用手动筛选,适合换…

2025-11-11

星闪E2.0亮相!华为FreeBuds Pro 5开启无线音频新篇,重塑TWS标准
于是,我们得到了星闪1.0,而在此基础上,华为今年又推出了星闪E2.0,将此前星闪1.0在音频传输上存在的一些问题彻底解决,并且做了全链路的升级。聊完星闪E2.0,接下来我们再聊聊FreeBuds Pro …

2025-11-11