
浏览次数: 时间:2025-06-04 02:35:49
【环球网科技综合报道】4月17日消息,Akamai宣布推出战略级解决方案Akamai Cloud Inference。据悉,这款基于其全球分布式云平台打造的AI推理解决方案,以突破性的性能指标引发行业关注——与传统超大规模云架构相比,其吞吐量提升3倍、延迟降低60%,成本降低86%。
在生成式AI应用爆发的背景下,企业逐渐意识到大型语言模型(LLM)训练与推理环节的架构差异。彭博社预测到2032年AI推理市场规模将达1.3万亿美元,其他多份近期报告也印证了这一判断。这一市场转变预示着2025年将成为分布式AI推理加速发展的元年。
训练如同绘制地图,需要集中式超算中心;而推理更像是实时导航,必须在靠近用户的边缘发生。Akamai云技术部门首席运营官兼总经理Adam Karon分析称,2025年大约有75%的数据将产生于传统云区域之外(Gartner数据),传统云架构在响应速度、数据传输成本等方面已稍显疲态。
在此背景下,Akamai推出Akamai Cloud Inference的解决方案,依托其覆盖130个国家、4200多个节点的分布式网络,构建了独特的云-边协同架构。通过与NVIDIA、VAST Data等生态伙伴的深度整合,该解决方案提供从GPU加速计算、向量数据库实时检索到WebAssembly边缘执行的完整技术栈。
Akamai通过整合VAST Data实时数据访问、可扩展对象存储及Aiven/Milvus向量数据库技术,构建了支持检索增强生成(RAG)的智能数据架构,实现微调模型的安全存储与全球范围的低延迟AI推理。
据悉,Akamai与Fermyon等 Wasm 提供商合作,集成WebAssembly技术,使开发者能够借助无服务器架构直接在边缘端执行轻量化LLM推理,为延迟敏感型应用提供支持。(青云)
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
奔驰“豁出去了”,31万一路跌至15万,不愧是“价格屠夫”,2.0T+9AT四驱,6秒破百,动力一流
日本气象厅警告 随时可能会发生大规模地震 呼吁当地民众做好日常防震准备
《编码物候》展览开幕 北京时代美术馆以科学艺术解读数字与生物交织的宇宙节律
五大旗舰高空信号实测:华为Mate 70 Pro+无悬念第一!iPhone 16 Pro直接断网负分
荣耀“MHG-AN00”手机现身 Geekbench,预计为 Magic V5
《巫师4》全新演示技术介绍:虚化5打造逼线》希里新形象引狂欢:酷飒的猎魔人女王回来了!