2025-02-10 11:00:27

第三代昆仑芯万卡集群点亮,全版本适配DeepSeek训练推理

  • 分享至
  • 分享到微信
  • 分享到微博

两周之内,DeepSeek成为全球增速最快的AI应用。2月6日,昆仑芯宣布,已完成DeepSeek训练推理全版本适配,在追求低成本、高效率的基础上支持卓越性能,能够实现一键部署,为广大开发者提供更快、更强、更省的训练推理体验。

强力适配DeepSeek,轻松完成全版本训练推理任务

昆仑芯表示,其在DeepSeek-V3/R1上线后不久便率先完成全版本模型适配,其中包括V3系列的DeepSeek-V3和DeepSeek-V3-Base,R1系(xì)列(liè)的(de)DeepSeek-R1、DeepSeek-R1-Zero等(děng)8个(gè)不(bù)同(tóng)版(bǎn)本(běn),MoE(混(hùn)合(hé)专(zhuān)家(jiā))模(mó)型(xíng)及(jí)其(qí)蒸(zhēng)馏(liú)的(de)Llama/Qwen等(děng)小(xiǎo)规(guī)模(mó)dense(稠(chóu)密(mì))模(mó)型(xíng)。不(bù)仅(jǐn)如(rú)此(cǐ),昆(kūn)仑(lún)芯(xīn)已(yǐ)全面(miàn)适(shì)配(pèi)文心(xīn)系(xì)列(liè)、Llama、Qwen、ChatGLM、Baichuan等(děng)各(gè)类(lèi)大(dà)模(mó)型(xíng)的(de)推(tuī)理(lǐ)和训练任务,性能优势明显。

昆仑芯 小.jpg

昆仑芯训练推理全版本适配DeepSeek

P800是昆仑芯厚积薄发推出的第三代产品,也是昆仑芯现阶段最具代表性的算力产品,可以较好地支撑DeepSeek系列MoE模型大规模训练任务,全面支持MLA(多头潜注意力)、多专家并行等特性,仅需32台即可支持模型全参数训练,高效完成模型持续训练和微调。

与此同时,P800显存规格优于同类主流GPU20%~50%,对MoE架构更加友好,且率先支持8bit推理,单机8卡即可运行671B模型。正因如此,昆仑芯相较同类产品更加易于部署,同时可显著降低运行成本,轻松完成DeepSeek-V3/R1全版(bǎn)本(běn)推(tuī)理任务。

P800生态完备,易用性强,可以实现对训练和推理任务的快速适配。P800快速适配支持了DeepSeek-V3/R1的持续全参数训练,LoRA(低秩自适应)等PEFT(参数高效微调)能力,提供给用户“开箱即用”的训练体验。基于昆仑芯完整的软件栈生态,两个步骤即可轻松实现在昆仑芯P800上进行DeepSeek-V3/R1推理部署,对广大开发者十分友好。

深耕AI加速十余年,大模(mó)型(xíng)时(shí)代(dài)实(shí)力(lì)凸(tū)显(xiǎn)

昆(kūn)仑(lún)芯(xīn)前(qián)身(shēn)为(wèi)百(bǎi)度(dù)智(zhì)能(néng)芯(xīn)片(piàn)及(jí)架(jià)构(gòu)部(bù),在(zài)百(bǎi)度(dù)内(nèi)部(bù)真(zhēn)实(shí)业(yè)务(wu)场(chǎng)景(jǐng)中(zhōng)深(shēn)耕(gēng)十(shí)年,于2021年4月完成独立融资。十余年的成长过程中,昆仑芯始终秉承着“让计算更智能”的使命,专注AI加速,打造拥有强大通用性、易用性和高性能的通用AI芯片。

昆仑芯2 小.jpg

昆仑芯P800算力集群(效果图)

昆仑芯与智能产业的上下游企业建立了良好的合作生态,通过(guò)向(xiàng)不(bù)同(tóng)行(xíng)业(yè)提(tí)供(gōng)以(yǐ)AI芯(xīn)片(piàn)为(wèi)基(jī)础(chǔ)的(de)智(zhì)能(néng)算(suàn)力(lì),在(zài)互(hù)联(lián)网(wǎng)、交(jiāo)通(tōng)、金(jīn)融(róng)、工(gōng)业(yè)、教(jiào)育(yù)等(děng)领(lǐng)域广(guǎng)泛(fàn)部(bù)署(shǔ)应用,促进了千行百业的智能化转型。

现如今,昆仑芯已完成三代AI芯片产品的设计研发和规模应用,并于2月5日宣布成功点亮第三代芯片P800万卡集群。在各个行业客户、合作伙伴的业务场景中,昆仑芯已实际上线运行各类大模型任务,通过千卡和万卡集群为客户提供了稳定的服务和优秀的性能表现。

“万卡集群”被认为是新一轮大模型竞赛的“入场券”,要想真正进行人工智能技术较量,万卡集群是必备的基础设施需求。昆仑芯万卡集群的成功点亮,意味着在以算力为基础的人工智能比拼中,昆仑芯将助力产业合作伙伴迈上算力规模建设的新台阶。昆仑芯表示,将于近期进一步(bù)点(diǎn)亮(liàng)3万(wàn)卡(kǎ)集群(qún)。

昆(kūn)仑(lún)芯(xīn)之(zhī)所(suǒ)以(yǐ)能(néng)够(gòu)在(zài)大(dà)模(mó)型(xíng)算(suàn)力(lì)竞(jìng)争(zhēng)中(zhōng)展(zhǎn)现(xiàn)优(yōu)势(shì),得(de)益(yì)于(yú)前(qián)瞻(zhān)的(de)产品定义、十余年软硬件技术积累和(hé)持续不断的产业合作。在生成式人工智能和大模型时代,昆仑芯将更加充分发挥自研优势,秉持共生共赢的理念,与产业链上下游携手创造更大的经济和社会价值。