全部标签

#MoE

8 篇文章

·大模型
1 分钟0

GLM-5.3-Flash 深度解读:320B-A18B、混合注意力与 1/40 成本背后的架构逻辑

一、引子:一个把海外社区搞糊涂的"牛来模型" 2026 年 8 月 20 日,一个名为 Ox Alpha 的匿名模型悄然上线全球模型聚合平台 OpenRouter 和编程平台 OpenCode。首日它就登顶 OpenRouter 调用量榜单、刷新单日 tokens 用量历史纪录,并终

·大模型
1 分钟0

Qwen3.8-Flash-Next 深度解读:GDN+QSA、门控残差与 N-gram Embedding,通向 Qwen4 的架构预览

一、引子:一个提前放出的"Qwen4 架构预览版" 2026 年 8 月 26 日晚,阿里通义千问团队发布并开源了 Qwen3.8-Flash-Next——一个多模态 MoE 模型。它的定位很特别:它不是 Qwen4 本身,而是 Qwen4 所使用架构的早期预览<sup>1

·AI, 大模型, 开源
1 分钟0

Kimi K3 全面开源深度解析:2.8万亿参数模型的技术突破与产业影响

Kimi K3 全面开源深度解析:2.8万亿参数模型的技术突破与产业影响 引言 2026年7月27日晚间,月之暗面(Moonshot AI)正式开源了 Kimi K3 模型的完整权重、技术报告、推理代码及许可证,同时开放了支撑模型训练的三大关键基础设施技术:MoonEP、FlashKD

·AI
1 分钟0

通义万象前世今生:从 AI 绘画到电影级视频生成的完整演进

引言 通义万相(WanX)是阿里云通义大模型家族中的视觉生成核心成员,从 2023 年 7 月上线至今,经历了从静态图像生成到电影级视频生成的完整技术跃迁。它不仅是国内最早一批 AI 绘画模型,更在 2025 年通过开源策略成为全球最受欢迎的视频生成模型之一,累计下载量突破 500 万次。