设为首页加入收藏
  • 首页
  • 临汾市
  • 黄石市
  • 九江市
  • 宁河县
  • 开县
  • 来宾市
  • 当前位置:首页 >无双乐团 >華為發表 AI 新技術「UCM」,擺脫 HBM 依賴、AI 推理速度暴增 90%

    華為發表 AI 新技術「UCM」,擺脫 HBM 依賴、AI 推理速度暴增 90%

    发布时间:2025-09-14 18:05:34 来源:志大才疏网 作者:淮北市

    由於美國出口限制,中國很難獲得 HBM 等關鍵資源。對此,華為打算幫助中國科技市場不再依賴 HBM。根據市場消息,華為開發一款名為「統一快取管理器」(Unified Cache Manager,簡稱 UCM)的新軟體工具,無需使用 HBM 即可加速大型語言模型(LLM)的訓練與推理。

    華為週二(12 日)在 2025 金融 AI 推理應用落地與發展論壇上發表 UCM 工具。該軟體根據不同記憶體類型的延遲特性,以及各類 AI 應用的延遲需求,將 AI 資料分配在 HBM、標準 DRAM 與 SSD 之間。

    華為資料儲存產品副總裁躍峰指出,目前 AI 推理面臨三大問題:「推不動」(輸入內容太長超出處理範圍)、「推得慢」(回應速度太慢)、「推得貴」(運算成本太高)。

    UCM 透過「分層記憶」的 Key-Value 快取架構,根據系統的可用資源速度最大化。

    據介紹,華為這次發布的 UCM,是做為一款以 KV 快取(KV Cache)為中心的推理加速套件,融合多類型緩存加速演算法工具,分級管理推理過程中產生的 KV 快取記憶數據,擴大推理上下文視窗,實現高吞吐、低時延的推理體驗,並降低每 Token 推理成本。

    UCM 在發表前已進行過長時間的實際應用測試。周躍峰指出,UCM 曾在中國銀聯中試用,應用場景包括「客戶語音分析、行銷規劃與辦公協助」。根據華為數據,搭配傳統快取與儲存技術的系統,在 AI 推理任務中使用 UCM,可將延遲降低最高達 90%,吞吐量提升至 22 倍。

    華為計劃 9 月正式開源 UCM,屆時將在魔擎社區首發,後續逐步貢獻給業界主流推理引擎社群,並共享給業內所有 Share Everything(共享架構)儲存廠商和生態夥伴。

    由於目前 HBM 晶片幾乎全由 SK 海力士、三星及美光生產,而美國一直致力於阻撓中國購買或自製 HBM,而 UCM 的出現有望擺脫美國牽制,加速中國晶片技術自主化。

    (首圖來源:Flickr/Web Summit CC BY 2.0)

    延伸閱讀:

    • 英特爾展示「USAI」專頁秀愛國承諾,強調深化美國製造、國防合作
    • 英特爾、IBM、Google 暫停數千個職缺,AI 五年內恐重塑勞動力格局

    文章看完覺得有幫助,何不給我們一個鼓勵

    請我們喝杯咖啡 icon-coffee

    想請我們喝幾杯咖啡?

    icon-tag

    每杯咖啡 65 元

    icon-coffeex 1 icon-coffeex 3 icon-coffeex 5 icon-coffeex

    您的咖啡贊助將是讓我們持續走下去的動力

    總金額共新臺幣 0 元 《關於請喝咖啡的 Q & A》 取消 確認
    [1][2][3][4][5][6][7][8][9][10]
  • 上一篇:4月财新中国制造业采购经理人指数(PMI)录得49.5 焦点热议
  • 下一篇:江苏无锡消费者满意度位列全国百城第一

    相关文章

    • 16岁女生离校后失联,当天发生了什么?
    • 鲤城区委主要领导带队到金龙街道调研
    • 新疆和田地区发生3.4级地震 震源深度10千米
    • 安徽桐城试点“证照联办”模式
    • 欧盟宣布1500亿欧元防务贷款初步分配方案
    • 被巡视党组织:以高度政治责任感主动接受巡视监督
    • 三大指数集体低开
    • 鹰潭市在江西省率先建立重点企业知识产权保护直通车制度
    • 新疆和田地区发生3.4级地震 震源深度10千米
    • 广东省湛江市市场监管局开展信用风险监管督导工作

      随便看看

    • 青海省海东市多措并举纵深推进药品安全巩固提升行动
    • 泉州发布福建首个市场监管全域合规清单
    • 以案为鉴
    • 最新大理州委常委名单 现任大理市委领导班子成员
    • 浙江金华出台奖励措施推进产业基础再造行动
    • 浙江嘉兴秀洲区出台新政支持“个转企”
    • 河北唐山在销售终端直播食品生产全过程
    • 甘肃省华亭市市场监管局多措并举加强企业名称登记规范化
    • 美团骑行在厦门上线“共享单车淤积引导功能”助力城市整洁畅通有序
    • 最新廊坊市长、副市长名单简历照片 廊坊政府领导班子成员
    • Copyright © 2025 Powered by 華為發表 AI 新技術「UCM」,擺脫 HBM 依賴、AI 推理速度暴增 90%,志大才疏网   sitemap