点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:趋境科技发布ATaaS:打造高效能AI Token生产服务平台
首页> 科技频道> 人工智能 > 正文

趋境科技发布ATaaS:打造高效能AI Token生产服务平台

来源:光明网2026-03-27 18:09

  当前,人工智能产业正从模型能力竞争逐步转向规模化应用竞争,应用形态也从单一问答扩展到多智能体协作、长链路推理和复合任务执行,这使得Token需求快速增长。与此同时,算力采购、部署和运行过程中的设备和能源成本持续攀升,导致算力投入与实际Token产出之间的不匹配问题日益突出,围绕Token推理效率开展系统优化,已成为推动产业持续发展的关键环节。

  近日,全球领先的高效能AI Token生产服务商趋境科技,正式发布全新一代AI推理平台——趋境ATaaS高效能AI Token生产服务平台(Approaching.AI Token as a Service),旨在破解大额硬件投入难以转化为优质Token产能、资源浪费与成本空耗突出的行业困境。

  针对当前行业核心难题,趋境ATaaS平台依托四大自研核心技术模块,构建起覆盖异构整合、智能调度、弹性扩容的全链路能力,将算力与能源封装为分层、面向具体应用场景定制的高效能Token服务,为国产算力提质增效、破解异构算力孤岛、实现规模化降本增效,提供了标杆级中国方案。

趋境科技发布ATaaS:打造高效能AI Token生产服务平台

  四大产业痛点凸显 硬件高投入难换高效Token产出

  当前AI产业发展中,Token生产领域面临四大突出困境,导致硬件高投入无法转化为高效Token产出,制约产业规模化发展:

  一是硬件负载分化,过度依赖GPU导致资源闲置空耗。传统Token生成链路重度依赖GPU,而CPU、大容量内存、集群SSD及IB高速互联等昂贵资源长期利用率不足10%,全系统硬件资源利用率不足20%,造成智算集群规模化刚性成本巨额空耗。

  二是软硬件迭代失衡,软件适配滞后拖累算力发挥。硬件标称算力虽持续提升,但软件层在通信、访存和算子融合等方面优化不足,PD/PP/CP/DP等分布式并行策略在复杂组合下稳定性有限,最终导致超80%理论算力难以充分利用。

  三是算力配置失准,粗放盲配引发资源冗余损耗。当前集群算力配置难以依据不同推理业务在时延、吞吐和稳定性上的差异化要求,精准匹配CPU、GPU、内存等异构资源,统一部署和粗放配额仍较常见,导致超过50%的算力资源被隐形浪费。

  四是架构演进失衡,拼接式集成难以支撑规模化生产。开源生态为大模型推理提供了丰富模块,但在大规模集群场景下,单靠组件拼接难以解决系统级协同问题,原生架构对KV Cache、序列长度等模型态关键参数感知不足,易引发负载失衡,叠加通信阻塞和服务波动等因素,系统扩展后常面临性能下降与运维复杂度上升,无法支持大规模高效能Token生产。

  四大核心技术破局 趋境ATaaS重构Token生产效能曲线

  趋境科技提供高效能Token的本质,是重构算力、电力与Token产量之间的效能曲线。ATaaS并非简单的资源供给平台,而是效能放大器——用软件撬动数倍于当前的Token产能,其四大自研核心技术精准破解行业痛点:

趋境科技发布ATaaS:打造高效能AI Token生产服务平台

  六合:异构推理2.0|全球首创大模型计算逻辑重构技术。深度融合CPU+GPU、国产与非国产算力异构PD分离等技术,重构模型计算逻辑,并基于算子与任务特征进行智能分流:CPU承载低计算密度任务,国产算力卡处理高密度Prefill,大显存显卡承载高访存Decode,可使万卡级智算集群整体运营成本压降20%以上。

  月饼:以存换算2.0|全球首创超体量KV Cache缓存技术。通过架构重构,将原本依赖昂贵显存承载的KV Cache存储空间扩展百倍至千倍,形成近乎无限的缓存池资源,缓存命中率最高可达90%,直接削减90% GPU算力开销。

  双仪:虚实同构|全球首创算子级SLO仿真。基于算子级精细仿真,推演大模型Token生成全链路的吞吐、时延与访存表现,实现算力资源的智能预规划与动态调优;围绕业务SLO分级需求,精准切分异构算力配额并隔离资源优先级,可将万卡级智算集群硬件综合资源利用率最高提升数倍。

  万象:极致弹性|打通规模化量产最后壁垒。依托系统化工程能力,实现万亿参数大模型7秒快速拉起与动态配置变更、数百节点超大规模EP弹性调度,以及智能容灾重构和负载均衡,形成平台原生支持万卡级高性能横向扩展的关键能力。在落地初期,便推动某在线公司的AI业务实现千卡集群吞吐翻倍提升。

  从“数据中心”到“Token工厂” 引领AI基础设施迭代升级

  趋境ATaaS高效能AI Token生产服务平台的发布,体现了AI基础设施发展重点的进一步演进。当前,行业关注的焦点正从单纯的算力规模竞争,转向对Token生产效率的综合衡量,其中包括Token响应延时(TTFT)、Token吞吐(TPS)以及资源利用效率等关键指标。

  这一理念与当前行业共识高度契合——当黄仁勋宣布NVIDIA的1万亿美元需求预测,当Token“供不应求”成为常态,算力基础设施正从“数据中心”演进为“Token工厂”。

  作为高效能AI Token生产服务商,趋境科技依托长期的团队积累和推理优化能力,推出趋境ATaaS平台的意义不仅在于拓展了推理基础设施的技术边界,更在于为AI基础设施的建设和运营提供了新的思路和行业标准:通过提升算力调度效率、优化推理过程、增强资源协同能力,使每单位算力和能耗投入都能够数倍转化为更稳定、更可衡量的Token价值产出,为AI产业规模化落地注入强劲动力。(战钊)

[ 责编:张佳兴 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 新建上海至南京至合肥高速铁路建设加速 全新南通站亮相展雄姿

  • 第81届联大开幕 聚焦重建信任和管理变革

独家策划

推荐阅读
费马大定理是过去半个世纪最负盛名的数学成果之一。
2026-09-09 09:04
当前,世界百年变局加速演进,新一轮科技革命和产业变革深入发展,人工智能作为引领时代变革的关键技术,正在重塑生产方式、生活方式和国际竞争格局,蕴藏着造福全人类的巨大潜能。
2026-09-09 08:56
文物科研工作长期建立在小范围观察、小样本归纳、小视角判断的认知链条上,高度依赖研究者的个人禀赋与经验积累。
2026-09-09 08:55
最近一个月,郭守敬望远镜再次令世界瞩目:为4万余颗贫金属红巨星精确测距,找到9个超高速星候选体,构建了近10万颗恒星的AI标注数据集。
2026-09-09 08:51
磷是植物生长必需的大量营养元素,可土壤里的磷大多“锁”在难溶的矿物和有机质里。土壤并不缺磷,植物却常常“够不着”。
2026-09-09 08:48
9月7日,工业和信息化部印发《信息通信行业发展“十五五”规划》,其中提到,“探索太空算力技术前瞻研究”。
2026-09-09 09:21
手机为什么突然集体涨价?答案不在手机行业
2026-09-09 09:13
慕思以“焕活芯生,越睡越懂你”为主题发布年度新品。
2026-09-08 21:10
金星没有卫星。但预印本平台arXiv近日公布的一项模拟研究显示,它在近20亿年的时间里可能拥有过一颗卫星,直到最后将其吞噬。厘清这一过程,有助于了解金星过去的宜居性。
2026-09-08 10:19
近日,生态环境部、科技部、中国人民银行、国务院国资委、金融监管总局等五部门联合印发《关于推动生态环境领域科技创新多元化投入的指导意见》。
2026-09-08 10:13
近日,由中国科学院紫金山天文台、国家天文台、清华大学等组成的研究团队,利用“中国天眼”(FAST)、南非MeerKAT射电望远镜和加拿大—法国—夏威夷光学望远镜,首次在银河系一个古老疏散星团的潮汐尾中直接识别出一颗脉冲星。
2026-09-08 10:04
日前,在国家科技传播中心举办的“新天工开物”科技成就发布会上,曹新有带来了三粒麦种——“济麦22”“济南17”“济麦44”,它们种出的麦子,可不止香在嘴里。
2026-09-08 10:03
北京大学城市与环境学院彭书时、物理学院沈路路研究团队联手国内外合作者首次阐明了甲烷“平台期”的维持机制:排放在涨,只是大气里清甲烷的“清洁队”恰好扩编了。
2026-09-08 10:02
从丝绸、茶叶、瓷器、中药,到酿造、工艺美术、文房四宝,这些文化底蕴深厚的中华传统特色产业均属于历史经典产业。
2026-09-07 17:14
延续已久的“手工科研”模式正在被一种全新的力量改写。
2026-09-07 16:44
一根通体透明的“玻璃棒”——看着像玻璃,其实它叫光纤预制棒,是生产光纤的核心原材料。2011年,我们开启了基于VAD(轴向气相沉积法)/OVD(棒外化学气相沉积法)工艺的大尺寸光纤预制棒自主研发的漫长征途。
2026-09-07 09:40
脑机接口是在大脑与外部设备之间建立直接信息通路的技术系统。“‘北脑一号’的初始版本采用128通道无线全植入柔性电极,电极贴附在硬脑膜外,兼顾安全性和有效性。”罗敏敏说,在可预见的未来,脑机接口有望实现从人脑与人工智能、机器人深度协同,拓展到健康人群的认知、感知增强等。
2026-09-07 09:38
距今约5000至4000年,大麦、小麦、牛与羊等驯化动植物在亚欧大陆的东西两端双向流动,构建起史前时期一幅跨大陆农牧业交流图景。“这表明,麦作农业和技术自新月沃地传入甘肃,可能并不直接伴随着来自西方的大规模人群流入。
2026-09-07 09:29
火红的钢坯从连铸机中源源不断送出,切割枪落下,每一段坯料的目标误差控制在0.2%以内,不超过一根头发丝的直径。从人工经验到数据驱动,从单点突破到全流程协同,从单一学科到交叉融合,安徽工业大学正在为钢铁行业装上“智慧大脑”。
2026-09-07 09:25
2016年,我到法国留学攻读应用科学与技术博士学位。回国后我进入人形机器人领域,发现品牌思维已深入人心。
2026-09-07 09:24
加载更多