1、中心側(cè)-大模型訓(xùn)練一體機(jī):
應(yīng)用場(chǎng)景:模型訓(xùn)練、智能問(wèn)答、智能撰寫(xiě)、數(shù)字人等
產(chǎn)品功能:具有更高算力密度、 極致能效比、高速網(wǎng)絡(luò)帶寬等特點(diǎn),廣泛應(yīng)用于深度學(xué)習(xí)模型開(kāi)發(fā)、訓(xùn)練
•形態(tài):4U機(jī)架服務(wù)器 (175mm × 447mm × 790mm)
•CPU:4 × 鯤鵬920,每CPU為48核,單核2.6GHz
•內(nèi)存:最多32個(gè)DDR4內(nèi)存插槽,最大4TB內(nèi)存;8個(gè)昇騰910芯片,每個(gè)配置64GB HBM
•網(wǎng)絡(luò)接口:4*GE+425GE/2*100GE+8*200GE(NPU直出,兼容100GE)
•AI算力:3.0/2.5 P FLOPS FP16;0.79/0.65 P FLOPS FP32;6.0/5.0 P TOPS INT8
•卡間互聯(lián):392GB/S HCCS 2.0互聯(lián)技術(shù)
•散熱:風(fēng)冷散熱
•功耗:最大5.2 kW,支持功耗封頂
2、中心側(cè)-大模型推理一體機(jī):
應(yīng)用場(chǎng)景:模型推理、小模型訓(xùn)練
產(chǎn)品功能:具有更高算力密度、極致能效比、高速網(wǎng)絡(luò)帶寬等特點(diǎn),廣泛應(yīng)用于深度學(xué)習(xí)模型推理
•形態(tài):4U機(jī)架服務(wù)器 (175mm × 447mm × 790mm)
•CPU:4 × 鯤鵬920,每CPU為48核,單核2.6GHz
•內(nèi)存:最多32個(gè)DDR4內(nèi)存插槽,最大4TB內(nèi)存;8個(gè)昇騰910芯片,每個(gè)配置32GB HBM
•網(wǎng)絡(luò)接口:4*GE+4*25GE/2*100GE+8*200GE (NPU直出,兼容100GE)
•AI算力:2.24 P FLOPS FP16;0.60 P FLOPS FP32; 4.48 P TOPS INT8。
•卡間互聯(lián):392GB/S HCCS 2.0互聯(lián)技術(shù)
•散熱:風(fēng)冷散熱
•功耗:最大5.2 kW,支持功耗封頂
3、邊側(cè)-大模型推理一體機(jī):
應(yīng)用場(chǎng)景:大模型以文生圖、文本生成
產(chǎn)品功能:產(chǎn)品具備AI推理、視頻分析等功能
•形態(tài):單槽位全高全長(zhǎng)PCIe卡
•尺寸:266.7mm(長(zhǎng)) × 18.46mm(寬)× 111.15mm(高)
•處理器核:內(nèi)置16個(gè)Arm Core(最大主頻1.9GHz)
•內(nèi)存:容量:96GB,總帶寬:408 GB/s;支持ECC
•AI算力:整數(shù)精度(INT8):280 TOPS ,半精度(FP16):140 TFLOPS
•編解碼能力:內(nèi)置DVPP預(yù)處理單元 視頻256路 1080P 30FPS(硬件解碼能力)
•功耗:150 W