沃资讯
科技 财经 汽车 游戏 数码 资讯 商业

字节跳动拟训练超5万亿参数大模型 核心骨干领衔欲争行业领先位

2026-08-07来源:互联网编辑:瑞雪

据科技行业内部消息透露,字节跳动正酝酿一项雄心勃勃的人工智能计划——开发参数规模突破5万亿的超大模型。这一数字不仅远超阿里巴巴近期发布的Qwen 3.8-Max(2.4万亿参数)和月之暗面公司推出的K3(2.8万亿参数),更将刷新国内大模型参数规模纪录。不过知情人士强调,该项目尚处于概念验证阶段,最终是否落地仍存在不确定性。

该项目的核心推动力量来自字节跳动人工智能研究院Seed Foundation。据内部人士披露,项目将由算法专家项亮领衔,与预训练数据负责人沈科组成技术攻坚小组。为保障项目推进,Seed部门正在进行组织架构调整,重新划分研发团队职责并优化资源配置。这种"双核心"架构设计,既保证了算法创新与数据工程的协同,也体现了字节跳动对超大模型训练的系统性布局。

两位技术负责人均具有深厚的"搜广推"(搜索、广告、推荐)技术背景。项亮作为中科院自动化所博士,2016年加入字节后先后主导机器学习中台和豆包大模型基础架构建设,在分布式训练系统设计方面经验丰富。沈科则是清华大学2018届毕业生,专注大规模预训练数据构建,其团队开发的数据清洗与增强技术曾显著提升模型训练效率。这种技术组合被业内视为"算法-数据"双轮驱动的典型配置。

关于选择超大规模参数的技术路线,接近项目组的人士分析称,当前大模型领域已进入"军备竞赛"阶段,单纯提升现有模型尺寸难以形成质变优势。字节跳动选择将参数规模直接提升至行业平均水平的两倍以上,旨在通过规模效应构建技术壁垒,在多模态理解、复杂推理等前沿领域争取先发优势。这种"跨越式发展"策略,与该公司过往在短视频推荐、广告算法等领域的技术突破路径一脉相承。

行业观察人士指出,训练5万亿参数模型面临多重挑战:不仅需要数万张高端GPU的算力支持,更涉及分布式训练框架优化、数据管道重构等系统工程难题。即便模型成功训练,如何实现高效推理部署、控制算力成本也是关键考验。字节跳动若能突破这些技术瓶颈,或将重新定义国内大模型的技术天花板,为AI应用生态带来新的想象空间。

效力谷歌27年首席科学家迪恩携手团队创立新企,借AI推动科学发现提速
IT之家 8 月 7 日消息,科技媒体 TechCrunch 昨日(8 月 6 日)发布博文,报道称在本轮谷歌母公司 Alphabet 旗下AI 公司 DeepMind 重组中,谷歌首席科学家杰夫 · 迪恩…

2026-08-07

马斯克预言AI将取代源代码引热议:行业大佬激辩未来编程新形态
就在刚刚,马斯克在 X 上甩出一条暴论:代码正在变成下一个汇编,下一步是彻底摒弃它,让 AI 直接生成二进制! 而这正是 Douma 那个「半个世纪前的类比」最薄弱的地方:一个是翻译官,忠实、准确、零发挥;…

2026-08-07

张朝阳谈AI时代:真人互动难能可贵,AI内容如化肥蔬果失真味
搜狐创始人、董事局主席兼首席执行官张朝阳在接受界面新闻等媒体采访时表示,真人互动与真实内容是AI永远替代不了的。信息获取和真人的沟通是两回事,AI目前取代不了人类交流。在信息海洋里,人更需要出来交流。AI时代…

2026-08-07

17岁少年陈广宇:从普通好奇少年到AI前沿技术论文共同第一作者
2025年5月,陈广宇在个人社交账号上分享了自己关于DeltaNet的博客,这是一篇关于线性注意力机制的技术分析,那是他花费数小时的钻研成果。陈广宇后来在社交平台回忆,Tilde 正在进行的项目让他感到兴奋,…

2026-08-07

打破传统!Simple AI手持设备记录数据,让机器人“零成本”学技能
评测在两台配备七自由度力控机械臂的双臂平台上进行,这台机器人在部署时安装的夹具和四个腕部相机与HiFi-UMI采集设备完全相同,消除了视觉接口的差异,剩余的差距只在于机械臂的运动学结构。遥控数据贵在它是在目…

2026-08-07

海尔智家李华刚:AI时代智慧生活,让设备“主动思考”贴心相伴
他表示:“过去是按一下、动一下,现在是不用开口,它已经想到了前头”。背后不是冷冰冰的技术名词,而是客厅里、阳台上、工厂中,一个个真实可感的改变。海尔一等奖的“热流除霜科技”,靠预霜模型提前判断结霜时机,不等用…

2026-08-07

谷歌AI格局生变:高层调整、人才出走,新竞争格局如何开启?
而比模型能力更值得关注的是:为什么在AI竞争最激烈的时候,一批曾经参与构建谷歌AI版图的人,选择离开这家拥有DeepMind、TPU、搜索和云业务优势的巨头,重新创办一家AI公司? 虽然Kavukcuogl…

2026-08-07

字节跳动年中全员会:梁汝波谈AI布局,正视差距坚持自研谋长远发展
在AI业务上,梁汝波总结了字节跳动AI业务在2026年上半年的表现,提到了豆包和视频生成模型Seedance。 红星资本局注意到,梁汝波曾于6月29日发布全员邮件,对包含领导力原则在内的字节跳动文化和管理…

2026-08-07

张一鸣“拒绝蒸馏”引热议:字节跳动能否以长期主义破局AI竞争?
8月6日,字节跳动创始人张一鸣在近期Seed团队内部会议上罕见发声,字节跳动不会依赖AI蒸馏技术来改进模型、蒸馏会干扰真正意义上的长期技术突破等言论,引发广泛关注。 但也有不少用户直言,豆包在复杂推理和代码…

2026-08-07

华为首款新国标3C移动电源发布:支持离线查找播放铃声,充电自充均达100W
"从李小龙公布的截图来看,该移动电源可通过蓝牙与手机连接,用户能够直接查看电池总电压、电池温度等运行信息,并使用智能提醒、查找设备、智能管理、本机设置和固件更新等功能。 整机还获得行业首批移动电源新国标C…

2026-08-07