Huawei tshaj tawm cov khoom tshiab AI Storage hauv Era ntawm Cov Qauv Loj

[Tuam Tshoj, Shenzhen, Lub Xya hli ntuj 14, 2023] Niaj hnub no, Huawei nthuav tawm nws cov tshiab AI cia kev daws teeb meem rau lub caij nyoog ntawm cov qauv loj, muab cov kev daws teeb meem zoo rau cov qauv kev cob qhia, kev cob qhia kev lag luam tshwj xeeb, thiab kev xav hauv segmented scenarios, yog li unleashing tshiab muaj peev xwm AI.

Hauv kev txhim kho thiab kev siv cov qauv loj loj, cov tuam txhab ntsib plaub qhov kev sib tw loj:

Ua ntej, lub sijhawm xav tau rau kev npaj cov ntaub ntawv ntev, cov ntaub ntawv cov ntaub ntawv tau tawg, thiab kev sib sau ua ke qeeb, siv sijhawm li 10 hnub rau kev ua tiav ntau pua terabytes ntawm cov ntaub ntawv. Thib ob, rau ntau hom qauv loj nrog cov ntawv loj thiab cov duab datasets, qhov kev thauj khoom ceev tam sim no rau cov ntaub ntawv me me yog tsawg dua 100MB / s, uas ua rau muaj kev ua haujlwm tsawg rau kev cob qhia teeb tsa. Thib peb, kev hloov pauv tsis tu ncua rau cov qauv loj, nrog rau cov kev cob qhia tsis ruaj khov, ua rau muaj kev cuam tshuam kev cob qhia kwv yees li 2 hnub, xav tau lub Checkpoint mechanism kom rov pib kev cob qhia, nrog kev rov ua haujlwm dua ib hnub. Thaum kawg, qhov kev ua tiav siab rau cov qauv loj, kev teeb tsa cov txheej txheem nyuaj, cov txheej txheem teem caij sib tw, thiab kev siv cov peev txheej GPU feem ntau qis dua 40%.

Huawei tab tom ua raws li tus qauv ntawm AI txoj kev loj hlob nyob rau hauv lub sijhawm ntawm cov qauv loj, muab cov kev daws teeb meem rau kev lag luam sib txawv thiab cov xwm txheej. Nws qhia txog OceanStor A310 Deep Learning Data Lake Storage thiab FusionCube A3000 Training/Inference Super-Converged Appliance. OceanStor A310 Deep Learning Data Lake Cia lub hom phiaj rau ob qho tib si hauv paus thiab kev lag luam-qib cov qauv loj cov ntaub ntawv hauv pas dej, ua tiav AI cov ntaub ntawv tswj hwm los ntawm cov ntaub ntawv sib sau ua ke, ua ntej ua qauv kev cob qhia, thiab kev siv cov ntaub ntawv inference. Lub OceanStor A310, nyob rau hauv ib lub 5U khib, txhawb kev lag luam-ua 400GB / s bandwidth thiab mus txog 12 lab IOPS, nrog linear scalability mus txog 4096 nodes, ua rau seamless cross-protocol kev sib txuas lus. Lub Ntiaj Teb Cov Ntaub Ntawv System (GFS) ua kom yooj yim cov ntaub ntawv ntse hla cov cheeb tsam, ua kom cov txheej txheem sib sau ua ke cov ntaub ntawv. Ze-kho suav paub txog ze-cov ntaub ntawv preprocessing, txo cov ntaub ntawv txav, thiab txhim kho preprocessing efficiency los ntawm 30%.

FusionCube A3000 Kev cob qhia / Inference Super-Converged Appliance, tsim rau kev lag luam-theem loj qauv kev cob qhia / inference scenarios, caters rau cov ntawv thov uas muaj cov qauv nrog ntau lab tus tsis. Nws koom ua ke OceanStor A300 kev ua haujlwm siab ntawm cov chaw khaws cia, kev cob qhia / kev xav ntawm cov khoom siv, hloov khoom siv, AI platform software, thiab kev tswj hwm thiab kev ua haujlwm software, muab cov qauv loj nrog cov khoom siv txuas thiab ua si rau kev xa tawm ib zaug. Npaj siv, nws tuaj yeem xa tawm hauv 2 teev. Ob qhov kev cob qhia / kev xav thiab kev khaws cia tuaj yeem ua rau nws tus kheej thiab kab rov tav nthuav dav kom haum rau ntau yam qauv kev xav tau. Lub caij no, FusionCube A3000 siv cov ntim khoom ua tau zoo los ua kom muaj ntau yam qauv kev cob qhia thiab kev ua haujlwm zoo los qhia GPUs, nce kev siv peev txheej los ntawm 40% mus rau ntau dua 70%. FusionCube A3000 txhawb nqa ob tus qauv ua lag luam hloov pauv: Huawei Ascend One-Stop Solution thiab tus neeg thib peb tus khub ib qho kev daws teeb meem nrog qhib suav, sib tham, thiab AI platform software.

Huawei Thawj Tswj Hwm ntawm Cov Ntaub Ntawv Cia Khoom Kab, Zhou Yuefeng, tau hais tias, "Nyob rau hauv lub sijhawm ntawm cov qauv loj, cov ntaub ntawv txiav txim siab qhov siab ntawm AI kev txawj ntse. Raws li tus neeg nqa khoom ntawm cov ntaub ntawv, cov ntaub ntawv khaws cia dhau los ua lub hauv paus tseem ceeb rau AI cov qauv loj. Huawei Cov Ntaub Ntawv Cia yuav txuas ntxiv tsim kho tshiab, muab ntau yam kev daws teeb meem thiab cov khoom lag luam rau lub sijhawm ntawm AI cov qauv loj, koom tes nrog cov neeg koom tes los txhawb AI kev txhawb nqa thoob plaws ntau yam kev lag luam. "


Post lub sij hawm: Aug-01-2023