华为麒麟 9050 系列 NPU 性能提升 140%
相关推荐
DiffuSpace开源Clover-35B-A3B:MoE扩散模型提速至680 tokens/s
火星财经消息 10月28日,扩散智能DiffuSpace发布并开源扩散语言模型Clover-35B-A3B-Preview。模型采用MoE架构,总参数350亿、单token激活约30亿,支持128K上下文与块扩散生成;在智能体编程、工具调用等任务上,评测表现超过Mercury 2.5及同尺寸Qwen3.6-35B-A3B。 技术侧重构门控Delta网络,以递归状态压缩历史上下文,结合双向注意力与可学习块大小校准适配块级并行去噪。权重代码已上架Hugging Face、GitHub,支持SGLang、llama.cpp,内部测试整体生成速度达680 tokens/s,较同规模自回归方案最高快5—10倍。(广角观察)
ICANN新一轮顶级域名申请达1615份,.agent成AI巨头争夺焦点
Odaily星球日报讯 据 ICANN 官方公告,新一轮通用顶级域名(gTLD)申请共收到 1615 份,AI 相关域名成为此次争夺热点。其中,.agent 域名共吸引 13 家申请方,包括 OpenAI、Meta、谷歌旗下注册局以及 iPollo 等。OpenAI 此次共申请 15 个顶级域名,涵盖 .gpt、.chatgpt 等;Anthropic 则申请了 .claude。此外,.btc、.bnb 等加密相关域名也获得多家申请。
ENS 向 ICANN 申请 .ens 顶级域名
Foresight News 消息,以太坊域名服务 ENS 发推表示,其已向互联网名称与数字地址分配机构(ICANN)正式申请 .ens 通用顶级域名。ENS 基金会表示,ICANN 已公布新一轮 gTLD 申请,.ens 仅有 ENS 一家申请,无竞争申请、无需竞拍。
vivo正预研30B MoE端侧大模型
vivo今日发布智能体大模型矩阵,包括四款核心模型:语音大模型BlueLM-RealTime,端侧大模型BlueLM-Nano,云侧大模型BlueLM-Flash和BlueLM-Pro。据悉,vivo正在预研蓝心30BMoE端侧大模型,探索万亿大模型在手机上应用。同时,vivo原生编程智能体BlueCode预览版、OriginOS7、自研的蓝河操作系统4等也一并发布。(财联社)
循环Transformer新架构:RLT让Token之间「接着算」
动察 Beating AI 快讯,普林斯顿博士生 Yifan Zhang 提出 Recurrent Looped Transformer(RLT),给 Transformer 加了一条会一直往后传的内部状态。 普通 Transformer 生成下一个 Token 时,主要通过 Attention 和 KV 缓存读取前文。RLT 除了看前文,还会把上一个 Token 算完留下的内部状态,直接交给下一个 Token 继续用。 可以把它理解成给模型加了一根「思维接力棒」。第一个 Token 算完,把当前状态传给第二个;第二个更新后再传给第三个。每个 Token 自己跑的网络层数没有变,但这根状态链会随着文本越来越长。论文把它称为「无限时间深度」,指的就是这条计算链没有固定长度上限。 它和最近讨论较多的 Ouro、Astra 类循环架构也不太一样。那类方法主要让同一个 Token 在同一套网络里多跑几轮;RLT 则让不同 Token 之间持续传递内部状态。前者像一道题交卷前多检查几遍,后者更像上一棒跑完,把手里的进度直接交给下一棒。
OpenAI最新模型Astra用上字节架构:Transformer同一层反复算
动察 Beating AI 快讯,OpenAI 即将发布的 Astra 用上了一种循环推理架构 recurrent depth,也叫 looped transformer。普通 Transformer 每生成一个 Token,会固定穿过一层层网络;Astra 可以让同一段信息反复经过同一组层,多算几轮再输出。 这条路线字节去年已经公开做过。Seed 团队发布的 Ouro 就是一种 Looped Language Model,同样让一组 Transformer 层循环运行,把更多计算放进模型内部。模型不用一直生成更长的思维链,也能增加推理计算量。较小模型因此能用更多计算,做到接近更大模型的效果。 这种架构也带来一个安全问题。部分推理发生在内部隐藏状态里,人类看不到完整文字记录,更难通过思维链检查模型有没有违规。OpenAI 因此限制了 Astra 使用 recurrent depth 的程度,让它仍保留可读的思维链,并准备加入额外的 CoT 监控。