后摩智能与高校合作研究成果荣获ISCA 2025最佳论文奖
近日,后摩合作北京后摩智能科技有限公司与北京大学集成电路学院孙广宇长聘副教授团队、智能最佳上海交通大学张宸助理教授团队、高校香港科技大学谢源讲席教授团队、研究东南大学司鑫副教授团队及阿里巴巴达摩院合作的成果研究成果《H2-LLM: Hardware-Dataflow Co-Exploration for Heterogeneous Hybrid-Bonding-based Low-Batch LLM Inference》,成功荣获第52届计算机体系结构国际研讨会(ISCA)最佳论文奖。荣获作为国内学术机构在该会议上的论文首次获奖成果,其核心创新聚焦于边缘侧大语言模型(LLM)推理加速架构的后摩合作关键技术突破,为解决边缘设备高效LLM推理难题提供了创新性方案。智能最佳
随着LLM在智能对话、高校代码生成、研究边缘推理等场景的成果规模化应用,如何在边缘设备上实现低延迟、荣获高能效的论文推理计算,成为行业亟待攻克的后摩合作技术瓶颈。现有DRAM近存计算架构虽具备高带宽优势,但受限于芯片计算逻辑嵌入设计,算力供给不足,难以满足边缘侧对计算密集型任务的加速需求。针对这一挑战,合作团队基于混合键合(Hybrid Bonding)新兴工艺,研发出面向边缘侧的H2-LLM推理加速架构。该架构通过提出通用近存计算架构模板,抽象设计空间以协调工艺中算力与带宽的权衡,并采用“以数据为中心”的数据流抽象优化异构硬件资源利用,实现了计算密集型与访存密集型算子的协同加速。实验数据显示,相较于基线DRAM近存架构,H2-LLM在LLM推理的预填充(Prefill)和解码(Decoding)阶段实现2.72倍的性能提升与1.48倍的能效优化,为边缘设备部署大语言模型提供了关键技术支撑。
此次成果是产学研协同创新的典范。北京大学孙广宇团队在领域定制芯片架构设计与自动化领域处于国际领先地位,研究成果多次获得顶级会议和期刊的最佳论文奖,并在多款芯片设计中实现产业验证。后摩智能与上海交通大学、东南大学、阿里巴巴达摩院的合作,充分发挥了各方在学术研究、技术开发和应用场景方面的优势,推动了边缘计算与大模型推理技术的工程化落地。
ISCA作为计算机体系结构领域的顶级国际会议,自1973年创办以来,始终是学术界与产业界技术交流的核心平台,与MICRO、HPCA、ASPLOS并称“体系结构四大会”。谷歌TPU、寒武纪芯片、华为昇腾等具有全球影响力的架构创新均曾在此首发。此次获奖标志着中国在边缘计算与LLM推理架构领域的研究已跻身国际顶尖行列,对推动我国人工智能底层技术发展具有重要意义。
未来,后摩智能将继续秉承开放合作、创新驱动的理念,与更多顶尖高校、科研机构和企业开展深度合作,共同推动智能计算技术的创新与发展。同时,后摩智能也将继续加强与各方的合作,围绕国家新一代人工智能战略需求,持续聚焦边缘侧计算与大模型推理的技术融合,共同推动智能计算技术的产业化应用。
(责任编辑:时尚)
-
厦门海关查获74吨废塑料膜 系固体废物PET、PE、PP薄膜
厦门海关查获74吨废塑料膜 。洪佳盛摄海峡网讯 (厦门网记者 沈伟彬 通讯员 洪佳盛) 8月29日,经专门机构鉴定,厦门海关此前查获的约74吨“聚酯薄膜(库存级)”属于我国限制 ...[详细]
-
12月4日,太平洋建设CEO刘安琦与河北省辛集市委副书记、代市长宗振华会谈,双方就发挥各自优势、加快推动政企合作深入交流。 刘安琦介绍太平洋建设的发展历程、企业文化、全国及河北业务开展基本 ...[详细]
-
第二十届普陀山南海观音文化节“禅意丹青”书画展开展 收藏资讯
10月30日下午,第二十届普陀山南海观音文化节配套活动之“禅意丹青”书画展在普陀山书院正式开幕,一众书画爱好者相聚一堂,共同品味禅意书画之美。管委会党委书记应朝阳出席开幕式并致辞,管委会党委委员、副主 ...[详细]
-
4月22日,水电七局参股投资建设的中国(绵阳)科技城新型显示产业园分布式光伏项目(以下简称新型产业园项目)并网发电。新型产业园项目位于四川省绵阳市涪城区,规划总建设面积约10万平方米,建设总容量约10 ...[详细]
-
《艾尔登法环:黑夜君临》1.02补丁下周发布 增加单人游玩符文产量
《艾尔登法环:黑夜君临》大获成功,首日销量超过200万套,Steam首日同时在线玩家超过30万。不过,这款游戏仍存在许多问题,其中最严重的莫过于单人游戏的不平衡。值得庆幸的是,开发团队已经意识到了这个 ...[详细]
-
中国消费者报济南讯记者尹训银)炎炎夏日,防晒皮肤衣受到了越来越多消费者的青睐。号称具有防晒功能的皮肤衣真的具有防晒效果吗?为什么有的皮肤衣穿着会感觉闷热不透气?消费者如何挑选一件既舒适又具备良好防晒性 ...[详细]
-
一般好的家具,打开柜门、抽屉后,其木质干燥、洁白,纹理清晰、明了,质地紧密、细腻。而那些由劣质材料加工而成的家具则无法达到上述水平。查看抽屉的滑动和定位,打开所有柜门和抽屉,确保它们安装得当,使用无碍 ...[详细]
-
宁波市消保委发布城市停车消费调查报告:近八成受访者遇到停车难问题
中国消费者报报道记者郑铁峰)随着机动车保有量持续增长,停车难、停车贵已成为影响城市运行效率和居民生活质量的重要问题。为促进停车服务健康发展,浙江省宁波市消费者权益保护委员会近期开展专项调查并于7月2日 ...[详细]
-
三室一厅是指一个房间有三个卧室和一个客厅的房屋户型。这种户型在现代家庭中非常常见,适合中小型家庭居住。房间装修图片三室一厅的文章将介绍如何设计和装饰这样的房间,以及一些相关的概念和使用经验。首先,设计 ...[详细]
-
弘仁元2024秋季艺术品拍卖会于11月3日星期日上午9:00)在浙江弘仁元拍卖大厅隆重举槌,同步竞拍有拍卖之家、中藏联拍、雅鉴艺拍等线上平台。本场拍品汇集历代名家书画、名人扇面油画、名家书法和楹联等5 ...[详细]