BTC $85,009.07 +0.52%
ETH $2,695.56 +0.60%
BNB $788.12 +2.90%
XRP $1.50 +0.90%
SOL $121.00 +1.40%
TRX $0.3352 +0.03%
DOGE $0.0931 +0.19%
ADA $0.2448 -0.19%
BCH $318.37 +2.57%
LINK $14.02 -0.03%
HYPE $89.74 +1.85%
AAVE $182.48 +1.42%
SUI $1.17 +2.15%
XLM $0.2157 +0.48%
ZEC $1,333.60 +1.40%
AAPL $333.44 +0.03%
AMZN $252.37 +0.20%
GOOGL $343.99 +0.09%
MSFT $518.13 +0.05%
META $729.85 +0.33%
NVDA $234.72 +0.20%
TSLA $371.45 +0.14%
SNDK $1,716.65 -0.10%
INTC $117.98 -0.24%
SPCX $158.96 -0.02%
MU $1,067.16 -0.15%
AMD $633.40 +0.04%
BTC $85,009.07 +0.52%
ETH $2,695.56 +0.60%
BNB $788.12 +2.90%
XRP $1.50 +0.90%
SOL $121.00 +1.40%
TRX $0.3352 +0.03%
DOGE $0.0931 +0.19%
ADA $0.2448 -0.19%
BCH $318.37 +2.57%
LINK $14.02 -0.03%
HYPE $89.74 +1.85%
AAVE $182.48 +1.42%
SUI $1.17 +2.15%
XLM $0.2157 +0.48%
ZEC $1,333.60 +1.40%
AAPL $333.44 +0.03%
AMZN $252.37 +0.20%
GOOGL $343.99 +0.09%
MSFT $518.13 +0.05%
META $729.85 +0.33%
NVDA $234.72 +0.20%
TSLA $371.45 +0.14%
SNDK $1,716.65 -0.10%
INTC $117.98 -0.24%
SPCX $158.96 -0.02%
MU $1,067.16 -0.15%
AMD $633.40 +0.04%

万亿参数

全部
文章
快讯

first_img 字节讨论训练超 5 万亿参数模型,Seed 基模团队调整架构

ChainCatcher 消息,据晚点 LatePost 报道,字节跳动正在讨论训练参数规模超 5 万亿的大模型,超过阿里 Qwen 3.8-Max(2.4 万亿)和月之暗面 K3(2.8 万亿),为目前国内已知最大规模方案。该计划仍处早期,不代表最终一定发布。新模型拟由 Seed Foundation 负责人项亮主导,并与大语言模型预训练数据负责人沈科合作,Seed 正据此重新梳理组织、划分职责并分配资源。两周前,字节跳动创始人张一鸣与 Seed 负责人吴永辉召开全员会。张一鸣安抚团队称训大模型本就很难,一段时间内可接受落后,希望以追求智能上限为目标、跻身世界第一梯队;他认可编程是当前关键方向,主张整合火山引擎、飞书与豆包资源以构筑算力和数据优势,同时提醒勿被单一热点牵着走。他表扬 Seedance 的差异化领先,并明确反对蒸馏,认为其难以真正超越,应从更底层构建 AGI 壁垒,并表示公司将在 AI 上持续加大投入。过去半年 Seed 多模态表现突出,Seedance 2.0、Seedream 等带动火山引擎 MaaS,但语言模型 Seed 2.0 市场反响有限,Coding 能力落后影响收入结构。字节已高薪引入郭达雅专攻 Coding,并收拢相关资源。面对行业普遍做大模型尺寸的趋势,字节希望以更大规模争取弯道超车,同时推动取消赛马、打破部门墙,集中力量攻坚。
app_icon
ChainCatcher 与创新者共建Web3世界