您现在的位置是:首页 > 科技科技
华为发布AI推理技术UCM:降低HBM依赖 计划9月正式开源 !
流沙2025-08-13 08:49【科技】6人已围观
8月13日消息,据媒体报道,在2025金融AI推理应用落地与发展论坛上,华为重磅发布了其AI推理创新技术——UCM(推理记忆数据管理器)。这项技术被业内视为有望重塑国内AI推理格局的关键突破。
UCM技术的核心在于其先进的KV Cache系统,通过融合多种缓存加速算法工具与精细的分级管理策略,高效处理推理过程中产生的大量记忆数据。这带来了多重显著优势:有效扩大上下文窗口,确保推理过程的高吞吐量与低延迟,并显著降低每个Token的推理成本。
尤为关键的是,UCM技术有望缓解当前因HBM(高带宽内存)资源短缺导致的任务停滞与响应延迟问题,为AI应用提供更流畅的体验,从而减少行业对HBM的过度依赖。
此次论坛不仅是UCM技术的首次亮相,华为还宣布将携手中国银联,共同发布双方在AI推理领域的最新应用成果。论坛还邀请了来自信通院、清华大学、科大讯飞等机构的专家,分享他们在优化大模型推理速度及提升用户体验方面的前沿经验。
华为数据存储产品线副总裁樊杰在演讲中强调了高质量行业数据与高性能存储对AI发展的重要性。他指出,未来的AI飞跃将极大依赖于此,高性能AI存储系统能将数据加载时间从数小时压缩至几分钟,同时使算力集群的效率实现倍增。
华为计划于2025年9月正式开源UCM技术,首发平台为魔擎社区。后续,华为将逐步将该技术贡献给业界主流的推理引擎社区,并向所有采用 “共享一切”(Share Everything) 架构的存储厂商及生态伙伴开放共享。
Tags:
热门文章
- 国产顶级5000万像素主摄!曝小米16 Pro将搭载思特威SC590XS !
- 土耳其一豪华游艇交付 下水几分钟就沉没!百万美元没了 !
- 小米汽车广告随处可见 雷军:让更多传统豪车用户看到我们!网友佩服小米自信和实力 !
- 博主体验小米澎湃OS 3:最大感受就是稳 !
- 南京发行苏超联动地铁卡:20元/张 一日内无限次乘坐地铁 !
- 电动车电池衰减到底有多快 中国特斯拉Model Y车主晒图:3年17.5万公里 电池健康度94% !
- 实锤!兰博基尼首席外饰设计师正式加盟小米 资料今年4月就已更新 !
- 男子不满13条狗半夜叫 毒死9只获刑:构成投放危险物质罪 !
- 上海地铁9号线试点拆除部分座椅 车厢能多站25人 !
热评文章
-
外卖、快递小哥最爱用手机品牌出炉:vivo第一 华为超小米 !
-
骁龙8 Elite Gen5领衔 刷新行业天花板!2025骁龙峰会定档9月24日 !
-
中国最重要的五大城市群 定了:京津冀、长三角、粤港澳瞄准全球!
-
租宝马车故意制造剐蹭再敲诈 法院判了:两人获刑 !
-
权威报告:中国AI云市场阿里云占比35.8%位列第一 高于2到4名的总和 !
-
纯电超450km一周用车无忧!小鹏超级增程家族首车X9预告 !
-
网约车司机大增23.3% 过去一年 更多35岁以下年轻人加入 !
-
王腾回应被小米辞退原因:没有窃取公司机密出售 没有收人钱财 没有做违法行为 !
-
AMD 25.9.1驱动重磅更新:FSR4支持大多数FSR3.1 DX12游戏!总数已超85款 !
-
官方通报“网约车内女乘客喊救命”被拦停:母女误解司机意图 调解后离开 !