AI & Big Data 10月28日 15:34
高通进军数据中心AI市场,发布AI推论解决方案
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

高通公司正式宣布进军数据中心AI市场,推出了AI200和AI250两款AI推论解决方案,包括AI推论晶片、加速卡、机架和软件堆栈。此举标志着高通从移动芯片供应商向数据中心基础设施提供商的转型。首位客户为沙特AI初创公司Humain,双方将共同部署先进AI基础设施,提供全球AI推论服务。高通的新解决方案专注于AI推论,旨在以更低的总体拥有成本优化大型语言模型和多模态模型的推论性能,并采用液冷等技术提升效率。

🚀 **高通正式进军数据中心AI市场**:高通发布了AI200和AI250两款AI推论解决方案,标志着其业务重心从移动通信芯片扩展至数据中心AI基础设施领域。该解决方案包括AI推论晶片、AI加速卡、机架以及软件堆栈,旨在满足日益增长的数据中心AI计算需求。

💡 **AI推论的专业化与性能优化**:高通此次推出的产品专注于AI推论,而非通用型GPU。AI200加速卡支持768GB LPDDR内存,而AI250则采用了创新的近内存计算架构,显著提升了有效内存带宽。这些设计旨在以更低的总体拥有成本,优化大型语言模型和多模态模型的推论效能。

🤝 **与沙特Humain的战略合作**:高通宣布沙特AI初创公司Humain为其首个客户,双方将合作在沙特阿拉伯部署先进的AI基础设施。从2026年起,他们将提供200MW的Qualcomm AI200/AI250机架式解决方案,为沙特及全球提供高性能AI推论服务,显示了其在全球AI发展中的战略布局。

❄️ **先进的机架级解决方案与散热技术**:高通的机架级解决方案具备直接液冷技术,以提高散热效率,并支持PCIe和Ethernet接口用于扩展。整柜标准功耗为160kW,体现了其在数据中心基础设施设计上的先进性和对大规模部署的考量,确保了高性能AI运算的稳定运行。

全球最大行動通訊晶片暨無線技術供應商高通(Qualcomm)周一(10/27)發表了AI200與AI250解決方案,相關解決方案包括AI200或AI250兩款AI推論晶片,AI加速卡,機架,以及軟體堆疊等,等於正式進軍AI資料中心市場。同一天揭露首家客戶為沙烏地阿拉伯AI新創Humain,雙方將在沙烏地阿拉伯部署先進AI基礎設施,提供全球AI推論服務。此一消息讓高通當天股價大漲了11.09%,以187.68美元作收。

目前市場上的AI晶片主要有三大分類,一是由Nvidia及AMD領軍的通用型GPU,這些原本針對影像渲染所設計的GPU可同時用來訓練或推論模型,它的應用非常有彈性,但既耗電又貴;其次為特殊應用IC(Application-Specific Integrated Circuit,ASIC),這是替AI運算量身打造的專用晶片,像是Google TPU或是OpenAI與博通的合作,在設計時就決定是要用來訓練還是推論;高通的發表則是屬於神經網路單元(Neural Processing Unit,NPU),這是專替AI推論所設計的處理器,其它例子還包括Apple Neural Engine、Samsung NPU及Meta MTIA等。

不過,高通並非只提供NPU晶片,而是推出機架級的AI推論解決方案,以更低的總持有成本來最佳化大型語言模型及多模態模型的推論效能,或是其它的AI工作負載。其中,搭載Qualcomm AI200的加速卡支援768GB的LPDDR記憶體,搭載Qualcomm AI250則採用創新的近記憶體(Near-memory Computing)運算架構,實現超過10倍的有效記憶體頻寬。Qualcomm AI200與Qualcomm AI250將分別在2026年及2027年正式出貨。

圖片來源/高通

兩款機架級解決方案都具備直接液冷以提高散熱效率,支援PCIe及Ethernet以向上擴充及向外擴展,亦支援機密運算,整櫃的標準功耗為160kW。這代表高通正式跨入資料中心AI推論基礎設施市場,而不再僅是行動晶片供應商。

同一天高通並與Humain宣布合作。Humain主導著沙烏地阿拉伯的國家級AI計畫,雙方協議自2026年起,將提供200MW(0.2GW)的Qualcomm AI200/AI250機架式解決方案,以替沙烏地阿拉伯及全球提供高性能的AI推論服務。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

高通 Qualcomm AI AI推论 数据中心 AI芯片 NPU Humain AI基础设施 AI Inference Data Center AI Chip AI Infrastructure
相关文章