国产乱码在线精品可播放,a级情欲片在线观看免费女女,无码专区在线无码,亚洲无码人妻mv

當(dāng)前位置:首頁 > 推理效率與國外同類產(chǎn)品架構(gòu)解決方案相當(dāng),國產(chǎn)飛騰 CPU 實現(xiàn)對 DeepSeek 全系列大模型端到端支持
推理效率與國外同類產(chǎn)品架構(gòu)解決方案相當(dāng),國產(chǎn)飛騰 CPU 實現(xiàn)對 DeepSeek 全系列大模型端到端支持
作者:牛馬軟件園 發(fā)布時間:2025-02-10 11:52:54

本站 2 月 9 日消息,飛騰信息技術(shù)有限公司昨日晚發(fā)文宣布,旗下騰云 S5000C 和騰銳 D3000 成功實現(xiàn)對 DeepSeek 全系列大模型的端到端支持,覆蓋數(shù)據(jù)中心和終端場景,本地部署的推理效率與國外同類產(chǎn)品架構(gòu)解決方案相當(dāng)。

據(jù)介紹,DeepSeek-V2.5 236B 大模型于2024 年在飛騰騰云 S5000C 平臺實現(xiàn)穩(wěn)定運行?;陲w騰騰云 S5000C 設(shè)備搭配 8 塊國產(chǎn) AI 卡,整體性能可達國外平臺性能 80% 左右。DeepSeek-V3 和 R1 版本發(fā)布后,飛騰技術(shù)團隊在騰云 S5000C 平臺和騰銳 D3000 上對其進行本地部署驗證,形成整體解決方案。

數(shù)據(jù)中心側(cè),飛騰騰云 S5000C 服務(wù)器可與多款 AI 加速卡配合實現(xiàn) DeepSeek 蒸餾版和全量版部署。飛騰 AI 實驗室在單機 8 卡服務(wù)器平臺已進行蒸餾版 DeepSeek-R1-Distill-Llama-70B 版本測試,推理速度可達 22tokens / s。完整版 DeepSeek R1 671B 模型采用分布式推理框架,基于四機 32 卡 AI 服務(wù)器集群運行可部署成功。

用戶終端側(cè),基于飛騰騰銳 D3000 的臺式機可以本地部署 DeepSeek-R1 7B 蒸餾版模型,搭配 1 張國產(chǎn)推理卡,實現(xiàn) AI PC 能力。

本站附飛騰騰云 S5000C和飛騰騰銳 D3000 兩款 CPU 的主要信息如下:

騰云 S5000C

飛騰騰云 S5000C 擁有 64 核、32 核、16 核 3 種產(chǎn)品形態(tài),兼容 ARMv8 指令集,支持硬件虛擬化,產(chǎn)品支持商業(yè)和工業(yè)分級,該產(chǎn)品主要面向計算服務(wù)器、存儲服務(wù)器、AI 服務(wù)器、高端網(wǎng)安、行業(yè)級業(yè)務(wù)主機服務(wù)器系統(tǒng)、大型互聯(lián)網(wǎng)數(shù)據(jù)中心等場景。

騰銳 D3000

飛騰騰銳 D3000 集成 8 個飛騰自主研發(fā)的新一代高性能處理器核 FTC862,兼容 64 位 ARMv8 指令集并支持 ARM64 和 ARM32 兩種執(zhí)行模式,支持單精度、雙精度浮點運算指令和 ASIMD 處理指令,主頻達到 2.5GHz,支持硬件虛擬化,支持商業(yè)和工業(yè)分級。