云聚 AI Token Plan 满 199 减 35 元
port:80 AI Junkie
AI 重度玩家的工程笔记本
DigitalOcean 开发者云

突破Transformer瓶颈:全球首个全亚线性大模型SubQ发布,支持1200万Token上下文

云聚 AI Token Plan 满 199 减 35 元

AI创新企业Subquadratic正式发布SubQ 1M-Preview,这是全球首个基于全亚线性架构的大语言模型。该模型通过重构底层注意力机制,彻底解决了传统Transformer算力随上下文长度呈“二次方增长”的瓶颈,实现了计算量的线性增长。在高达1200万Token的测试中,SubQ不仅保持稳定运行,还将计算量降低了近1000倍,推理速度比FlashAttention快52倍。此举意味着长文本处理不再需要依赖RAG或分块处理,有望大幅降低AI推理成本并提升Agent的跨库代码规划与深度搜索能力。

原文链接:Linux.do

阿里云 OPC 一人公司创业装备库
阿里云函数计算 一键部署 AI 大模型
赞(0)
未经允许不得转载:80aj » 突破Transformer瓶颈:全球首个全亚线性大模型SubQ发布,支持1200万Token上下文
赞助推荐 FoxCode Claude Code 稳定中转
阿里云函数计算 一键部署 AI 大模型

GLM Claude Code · 国产平替不封号

官方 Claude Code 又涨价又要 KYC,封号还得重配环境?智谱 GLM 兼容 Claude Code,稳定不封号、价格友好,注册后把现有 Claude Code 工作流直接切过来继续用。

立即体验 GLM查看套餐价格