LAP vs GPU don le haghaidh AI: cén fáth a n-úsáideann gach duine GPUanna (agus cén fáth a bhféadfadh sé sin athrú)

Lárionad na nGPUanna san AI. Ach cén fáth? Agus an bhfuil siad riachtanach i ndáiríre? Seo an fhírinne ionraic faoi CPU vs GPU d'ualach oibre AI.

LAP vs GPU don le haghaidh AI: cén fáth a n-úsáideann gach duine GPUanna (agus cén fáth a bhféadfadh sé sin athrú)

An tóir ar GPUanna

Labhair le duine ar bith faoi AI a rith agus déarfaidh siad: "Teastaíonn GPU uait. Tá LAPanna rómhall. Úsáideann gach duine GPUanna."

Agus tá an ceart acu. Den chuid is mó. Tá ceannas ag GPUanna ar AI ar chúiseanna maithe. Ach níl an scéal chomh simplí sin.

Tá sé tábhachtach tuiscint a fháil ar an fáth ar bhuaigh GPUanna, cad iad na rudaí a bhfuil LAPanna go maith orthu i ndáiríre, agus cén fáth a bhféadfadh an chothromaíocht a bheith ag athrú. Go háirithe má tá tú ag íoc na mbillí. Nó billí do sholáthraí leictreachais. Nó ag smaoineamh cén fáth a bhfuil fostáisiún leictreachais féin ag teastáil ó do lárionad sonraí.

Is é an gnáth-thuairim: teastaíonn comhthreomhaíocht ollmhór ó líonraí néarúla snámhphointe, soláthraíonn GPUanna comhthreomhaíocht ollmhór, mar sin bíonn an bua ag GPUanna. Ach níl ann ach leath an scéil. Baineann an leath eile leis an méid a tharlaíonn nuair a athraíonn tú an mhatamaitic.

Cad iad LAPanna agus GPUanna i ndáiríre

Tosaímis leis na bunghnéithe:

LAP (Aonad Próiseála Lárnach):

Inchinn do ríomhaire. Deartha do thascanna ginearálta. Ritheann sé do chóras oibriúcháin. Osclaíonn sé comhaid. Bainistíonn sé cuimhne. Ritheann sé cláir. Déanann sé beagán de gach rud.

Tá 8-64 croí i LAPanna nua-aimseartha. Tá gach croí cumhachtach. Is féidir leis loighic chasta a láimhseáil. Brainseach. Tascanna seicheamhacha. Go hiontach ag rudaí éagsúla a dhéanamh go tapa. Smaoinigh ar LAP mar fhoireann bheag innealtóirí ardoilte, agus is féidir le gach ceann acu fadhbanna casta a réiteach go neamhspleách.

GPU (Aonad Próiseála Grafaicí):

Tógtha ar dtús don ghrafaic. Éilíonn radhairc 3D a rindreáil an mhatamaitic shimplí chéanna ar na milliúin picteilín ag an am céanna. Sármhaith ag GPUanna air seo: oibríochtaí simplí, comhthreomhaíocht ollmhór.

Tá na mílte croí i GPUanna nua-aimseartha. Tá gach croí níos simplí ná croí LAP. Ach na mílte acu ag obair le chéile? Tréchur ríomhaireachta ollmhór do thascanna comhthreomhara. Smaoinigh ar GPU mar urlár monarchan le na mílte oibrithe, agus gach ceann acu ag déanamh tasc simplí amháin go han-tapa.

Sin an difríocht bhunúsach: is ginearálaithe ilúsáideacha iad LAPanna. Is próiseálaithe comhthreomhara speisialaithe iad GPUanna.

Seo comparáid amhairc:

LAP: Cúpla Croíleacán Cumhachtach Croíleacán 1 Croíleacán 2 Croíleacán 3 Croíleacán 4 Croíleacán 5 Croíleacán 6 Croíleacán 7 Croíleacán 8 Tascanna casta, brainseachas, loighic GPU: Na Míltte Croíleacán Simplí Na mílte croíleacán Oibríochtaí comhthreomhara simplí Feidhmíocht ar ualaí oibre AI: Snámhphointe: GPU a bhuaigh 20-100× Oibríochtaí dénártha: LAP iomaíoch nó níos tapúla
Tógtar LAPanna agus GPUanna le haghaidh cruthanna éagsúla oibre: cúpla croí láidir ghinearálta i gcomparáid le mílte lánaí simplí athdhéanta.

Cén fáth a bhfuil GPUanna i gceannas ar AI

Tá ualaí oibre AI, go háirithe líonraí néaracha, comhthreomhar go náireach. Seo an fáth a mbuaileann GPUanna:

Iolrú maitríse i ngach áit:

Is iolruithe maitríse iad líonraí néaracha den chuid is mó. Iolraigh an t-ionchur faoi na meáchain. Na milliúin iolruithe. Neamhspleách go léir. Foirfe le haghaidh próiseála comhthreomhaire.

GPU: Déan na hiolruithe go léir go comhuaineach ar fud na mílte croí. Tapa.

LAP: Déan na hiolruithe go seicheamhach nó ar fud croíthe teoranta. I bhfad níos moille.

Sampla: D'fhéadfadh ciseal amháin i múnla teanga mór maitrís 1024×4096 a iolrú faoi mhaitrís 4096×1024. Sin níos mó ná 4 bhilliún oibríocht iolraithe-suimithe. Ar GPU le croíthe teannsóra, tógann sé seo milleasoicindí. Ar LAP, soicindí. Tá an bhearna ollmhór.

An oibríocht chéanna, sonraí éagsúla:

Déanann gach néarón an oibríocht chéanna: iolrú-suimiú. Ach le sonraí éagsúla. Tugtar SIMD (Single Instruction, Multiple Data) air seo. Tógtar GPUanna le haghaidh seo.

GPU: Treoir amháin craolta chuig na mílte croí. Cuireann gach ceann i bhfeidhm ar shonraí éagsúla é. Éifeachtach.

LAP: Is féidir SIMD a dhéanamh le treoracha veicteora (AVX-512), ach amháin ar fud leithid bheaga (8-16 oibríocht). Ní scálaíonn sé cosúil le GPUanna.

Tá sé cosúil le oideas céanna a thabhairt do mhíle cócaire i gcomparáid le hocht gcócaire. Críochnaíonn na míle cócaire a miasa go comhuaineach. Caithfidh na hocht gcócaire oibriú i mbaitsí. Matamaitic shimplí.

Bandleithead cuimhne:

Caithfidh AI méideanna ollmhóra sonraí a bhogadh. Na billiúin meáchain. Na billiúin gníomhachtaithe. Tá bandleithead cuimhne tábhachtach.

GPU: Ailtireacht chuimhne optamaithe. Cuimhne ard-bandleithead (HBM). Deartha le haghaidh ualaí oibre dian ar shonraí. Na céadta GB/s.

LAP: Bandleithead cuimhne níos ísle. Optamaithe le haghaidh latency, ní tréchur. Deichniúr GB/s.

Smaoinigh air mar phíopaí uisce. Tá píopaí ollmhóra ag GPUanna ar féidir leo méideanna ollmhóra sonraí a bhogadh go tapa. Tá píopaí níos cúinge ag LAPanna atá optamaithe le haghaidh rochtain thapa ar mhéideanna níos lú sonraí. Le haghaidh súnamaí sonraí AI, ba mhaith leat na píopaí níos mó.

Crua-earraí speisialaithe:

Tá croíthe teannsóra ag GPUanna nua-aimseartha. Crua-earraí go sonrach le haghaidh iolrú maitríse. Thar a bheith tapa le haghaidh ualaí oibre AI.

An NVIDIA A100, mar shampla, seachadann sé suas le 624 TFLOPS de fheidhmíocht FP16 lena chroíthe teannsóra tríú glúin. Brúnn an H200 níos airde fós le cuimhne HBM3e feabhsaithe. Níl siad seo díreach tapa; tá siad tógtha go sainiúil do na hoibríochtaí cruinne a theastaíonn ó líonraí néaracha.

Tá LAPanna cuspóir ginearálta. Gan crua-earraí AI speisialaithe (den chuid is mó). Déan gach rud go maith, rud ar bith eisceachtúil.

Le haghaidh líonraí néaracha traidisiúnta le hoibríochtaí snámhphointe, tá GPUanna 10-100× níos tapúla ná LAPanna. Tá an bhearna fíor.

Is iolrú maitríse athdhéanta iad líonraí néaracha traidisiúnta den chuid is mó. Sin an fáth a mbuaileann lánaí GPU an t-oiliúint snámhphointe agus an t-ionduchtú múnla mór.

Cad atá LAPanna go maith i ndáiríre

Níl LAPanna gan úsáid don AI. Tá siad ar fheabhas ar rudaí éagsúla:

Loighic chasta agus brainseach:

Láimhseálann LAPanna loighic choinníollach go maith. Má-tá-eile. Ráitis lasc. Sreabhadh rialaithe casta. Bíonn deacracht ag GPUanna leis seo. Is cúis le héagsúlacht é brainseach, rud a mharaíonn comhthreomhaireacht.

Maidir le tascanna AI le go leor loighic choinníollach, is féidir le LAPanna dul san iomaíocht.

Samhlaigh GPU le mílte croíleacáin ag iarraidh cosáin chóid éagsúla a fhorghníomhú. Tá leath na gcroíleacán ag iarraidh dul ar chlé, tá leath ag iarraidh dul ar dheis. Caithfidh an GPU an dá chosán a fhorghníomhú agus torthaí a cheilt. Cur amú. Ní dhéanann LAP ach an cosán a theastaíonn uaidh a fhorghníomhú. Éifeachtach don loighic brainseach.

Tátal íseal-latency:

Maidir le samhlacha beaga le ceanglais dhian latency, buaileann LAPanna. Gan aon chostas aistrithe sonraí. Gan aon tosú GPU. Forghníomhú láithreach amháin.

Gléasanna imeallacha, córais fhíor-ama, feidhmchláir idirghníomhacha. Tá tátal LAP praiticiúil.

Is féidir le haistriú PCIe amháin 1-10 milleasoicind a chur leis. Maidir le samhail a ritheann i 2 mhilleasoicind, tá an costas sin do-ghlactha. Forghníomhaíonn LAPanna láithreach. Nialas latency aistrithe. Tá sé seo tábhachtach d'fheidhmchláir fhreagracha.

Oibríochtaí slánuimhreacha agus dénártha:

Tá LAPanna ar fheabhas ar mhatamaitic slánuimhreacha. Oibríochtaí giotáin. Oibríochtaí loighciúla. Is bun-oibríochtaí LAP iad seo, optamaithe le blianta fada.

Maidir le líonraí néaracha dénártha nó samhlacha slánuimhir-chandamaithe, cúngaíonn an bhearna LAP-GPU go suntasach.

Bhí geataí XNOR i LAPanna ón tús. Is treoir aon-timthrialla é comhaireamh giotán (popcount) ar LAPanna nua-aimseartha. Tá na hoibríochtaí seo chomh bunúsach gur optamaigh innealtóirí sileacain iad gan staonadh. Nuair a úsáideann do shamhail AI na bun-oibríochtaí seo in ionad iolrú-suimiú snámhphointe, go tobann tá níos mó tábhachta ag baint le blianta optamaithe an LAP ná le croíleacáin chomhthreomhara an GPU.

Infhaighteacht ghinearálta:

Tá LAP ag gach gléas. Níl GPU ag gach gléas. Maidir le himscaradh i ngach áit, is iad LAPanna an t-aon rogha uilíoch.

Fóin, gléasanna IoT, córais leabaithe. Is minic gurb é tátal LAP an t-aon rogha.

Tá ceanglais dhian cónaitheachta sonraí ag an Eoraip faoin GDPR. Má ritheann AI go háitiúil ar LAPanna, seachnaítear spleáchais scamall agus castachtaí aistrithe sonraí trasteorann. Tá LAP ag fón an úsáideora cheana féin. Níl aon chrua-earraí breise ag teastáil. Níl aon sonraí ag fágáil an ghléis. Comhlíonadh réitithe.

An claochlú a dhéanann líonraí néaracha dénártha

Seo áit a n-éiríonn sé suimiúil. An cuimhin leat na hoibríochtaí dénártha sin a bhfuil LAPanna go maith orthu?

Úsáideann líonraí néaracha dénártha XNOR agus popcount in ionad iolrú-suimiú snámhphointe. Is bun-oibríochtaí LAP iad seo. Thar a bheith tapa ar LAPanna.

Tá an mhatamaitic galánta: in ionad uimhreacha snámhphointe 32-giotán a iolrú, déanann tú luachanna 1-ghiotán a chur i gcomparáid le XNOR, ansin comhaireann tú giotáin mheaitseála le popcount. An chomparáid loighciúil chéanna, cur i bhfeidhm i bhfad níos simplí. Agus tá LAPanna ag déanamh seo ó na 1970idí.

Feidhmíocht LAP le líonraí dénártha:

Maidir le líonraí dénártha, is féidir le LAPanna feidhmíocht GPU a mheaitseáil nó a shárú. Cén fáth?

Tá XNOR agus popcount saor ar LAPanna. 6 trasraitheoir le haghaidh XNOR. Oibríochtaí aon-timthrialla. Gan aon chostas snámhphointe.

Tá GPUanna optamaithe don snámhphointe. Ní chabhraíonn a gcroíleacáin teannsóra le hoibríochtaí dénártha. Bíonn an speisialtóireacht ina teorainn.

Is ionann é agus carr Foirmle a hAon a thabhairt go rás rally. Cinnte, tá sé tapa ar rianta réidhe. Ach nuair a athraíonn an tír-raon, bíonn an meaisín rásaíochta speisialaithe ag streachailt agus éiríonn go hiontach leis an gcarr rally ilúsáideach. D'athraigh oibríochtaí dénártha an tír-raon.

Cur chuige Dweve:

Ritheann ár gcóras Loom i bhfad níos tapúla ar LAPanna i gcomparáid le samhlacha trasfhoirmeora ar GPUanna. Ní toisc go bhfuil draíocht againn. Ach toisc go n-oireann oibríochtaí dénártha do LAPanna níos fearr ná mar a oireann pointí snámh dóibh.

Is é XNOR-popcount an rud ar dearadh LAPanna lena aghaidh. Oibríochtaí loighce. Comhaireamh giotán. Tapa.

Ní teoiriciúil é seo. Is féidir é a thomhas. Athraíonn líonraí dénártha cothromóid na crua-earraí go bunúsach. Nuair is féidir leat ach 4-8 saineolaí réimse a ghníomhachtú as 456 rogha atá ar fáil ag baint úsáide as srianta dénártha, agus gach saineolaí réimse 64-128MB de rialacha loighce íona, láimhseálann LAPanna é seo go hiontach. Gan aon uimhríocht phointe snámh ag teastáil. Díreach oibríochtaí giotán tapa, éifeachtúla.

Tomhaltas cumhachta (an costas i bhfolach)

Ní hé feidhmíocht gach rud. Tá tomhaltas cumhachta tábhachtach. Go háirithe san Eoraip, áit a bhfuil costais fuinnimh ard agus rialacháin inbhuanaitheachta dian.

Tomhaltas cumhachta GPU:

Ídíonn GPUanna AI ardleibhéil 300-700 vata. Faoi ualach, i gcónaí. Ar feadh uaireanta nó laethanta le linn oiliúna.

Ídíonn ionaid sonraí lán de GPUanna meigeavata. Leictreachas fiú do stáisiúin chumhachta. Riachtanais fhuaraithe ollmhóra. Tá an costas oibriúcháin ollmhór.

Tuartar go n-ídeoidh próiseálaithe AI na todhchaí suas le 15,360 vata an ceann. Ní botún cló é sin. Cúig chilowatt déag. In aghaidh an tslis. Beidh réitigh fhuaraithe eachtranacha agus bonneagar cumhachta tiomnaithe uait. Éilíonn Treoir um Éifeachtúlacht Fuinnimh an AE ar ionaid sonraí atá rátáilte os cionn 500 cileavata tuairisciú a dhéanamh ar thomhaltas fuinnimh. Le GPUanna mar seo, sroichfidh tú an tairseach sin go tapa.

Tomhaltas cumhachta LAP:

Ídíonn LAPanna nua-aimseartha 50-150 vata faoi ualaí oibre AI. I bhfad níos lú ná GPUanna.

Le haghaidh tátail, go háirithe imscaradh imeallach, tá éifeachtúlacht chumhachta tábhachtach. Saol ceallraí. Teorainneacha teirmeacha. Costais oibriúcháin.

D'fhógair AMD le déanaí feabhsú éifeachtúlachta fuinnimh 20× ar scála raca do chórais AI faoi 2030, ag dul thar threochtaí an tionscail beagnach 3×. Ach fiú leis na feabhsuithe seo, fanann GPUanna ocrach ar chumhacht i gcomparáid le LAPanna do go leor ualaí oibre.

Buntáiste na n-oibríochtaí dénártha:

Ídíonn oibríochtaí dénártha i bhfad níos lú cumhachta ná pointí snámh. Ciorcaid níos simplí. Níos lú gníomhaíocht aistrithe. Fuinneamh níos ísle in aghaidh na hoibríochta.

Ar LAPanna le líonraí dénártha: laghdú cumhachta 96% i gcomparáid le líonraí pointe snámh GPU. An tasc céanna. Blúire den fhuinneamh.

Tá sé seo tábhachtach don inbhuanaitheacht. Do chostais oibriúcháin. Do shrianta imscartha. Nuair atá costais leictreachais na hEorpa i measc na gcostas is airde ar domhan, ní hamháin go bhfuil sé éifeachtúil AI a reáchtáil ar LAPanna le hoibríochtaí dénártha; tá sé ciallmhar ó thaobh eacnamaíochta de. Beidh meas ag do chuntasóir ar na billí cumhachta níos ísle. Beidh meas ag d'oifigeach inbhuanaitheachta ar an lorg carbóin laghdaithe.

Cúrsaí costais (an réaltacht ghnó)

Cosnaíonn crua-earraí airgead. Bímis sonrach:

  • Costais GPU: Cosnaíonn GPUanna AI ardleibhéil na mílte déag in aghaidh an aonaid. Athraíonn cíos ionad sonraí ach suimíonn sé go tapa. Éilíonn oiliúint samhlacha móra na céadta GPU ar feadh seachtainí. Sroicheann an bille na milliúin.
  • Costais LAP: Cosnaíonn LAPanna ardleibhéil na mílte, ní na mílte déag. I bhfad níos saoire. Cheana féin i ngach freastalaí. Gan gá le ceannach crua-earraí breise.
  • TCO (Costas Iomlán Úinéireachta): Éilíonn GPUanna costas crua-earraí móide tomhaltas cumhachta móide fuarú móide bonneagar speisialaithe. TCO ard.

LAPanna: Costas crua-earraí níos ísle móide cumhacht níos ísle móide bonneagar caighdeánach. TCO níos ísle.

Le haghaidh tátail ar scála, go háirithe le líonraí dénártha, is féidir le LAPanna a bheith níos éifeachtúla ó thaobh costais de. Dúntar an bhearna feidhmíochta, leathnaíonn an bhearna costais i bhfabhar LAP.

Seo sampla praiticiúil: tátal a rith do mhilliún iarratas in aghaidh an lae. Ar GPUanna le samhlacha snámhphointe, b'fhéidir go mbeadh freastalaithe GPU tiomnaithe, bonneagar fuaraithe, agus buiséid shuntasacha chumhachta uait. Ar LAPanna le líonraí dénártha, is féidir leat an bonneagar freastalaí atá ann cheana, fuarú caighdeánach, agus codán den chumhacht a úsáid. Na cumais chéanna, geilleagar an-difriúil.

Tá breithniú breise le déanamh ag cuideachtaí Eorpacha: ceannasacht crua-earraí. Tagann an chuid is mó de GPUanna AI ardleibhéil ó mhonaróirí Meiriceánacha. Cruthaíonn spleáchais slabhra soláthair rioscaí. Tugann LAPanna roghanna soláthair níos éagsúla, lena n-áirítear monaróirí Eorpacha. Nuair a théann teannas geopolitical i bhfeidhm ar sholáthairtí sliseanna, is cuma faoi roghanna eile.

Athraíonn líonraí dénártha an t-oiriúnú meaisín: bogann XNOR agus popcount an tátal i dtreo oibríochtaí a dhéanann LAPanna go héifeachtach cheana féin.

Cathain a úsáidfidh tú cé acu

Braitheann an rogha cheart ar do chás úsáide:

Úsáid GPUanna nuair:

Ag traenáil samhlacha móra snámhphointe. Tá feidhmíocht ríthábhachtach. Ceadaíonn an buiséad. Níl an chumhacht srianta. Ailtireachtaí traidisiúnta líonraí néaracha.

Sármhaitheas ag GPUanna anseo. Gan cheist. Má tá samhail trasfhoirmeora le 70 billiún paraiméadar á traenáil agat, is cairde iad GPUanna duit. Mar gheall ar a n-ailtireacht chomhthreomhar agus a gcroíleacáin teannóra, is iad an rogha soiléir iad le haghaidh iolrúcháin mhaitríse snámhphointe ollmhóra.

Úsáid LAPanna nuair:

Ag rith tátail ag an imeall. Tá an chumhacht teoranta. Is cuma faoin gcostas. Tá ceanglais dhéine ar an bhfolaíocht. Samhlacha dénártha nó candaithe. Imscaradh i ngach áit.

Ciall le LAPanna. Go minic an t-aon rogha.

Smaoinigh freisin ar LAPanna nuair is gá duit comhlíonadh GDPR le próiseáil áitiúil, nuair atá tú ag imscaradh chuig crua-earraí éagsúla gan GPUanna ar fáil, nuair is mó an tábhacht a bhaineann le héifeachtúlacht fuinnimh ná le tréchur amh, nó nuair atá líonraí néaracha dénártha in úsáid agat a bhaineann leas as láidreachtaí LAP.

An cur chuige hibrideach:

Traenáil ar GPUanna (má tá snámhphointe in úsáid). Imscar ar LAPanna (ag úsáid leaganacha dénártha/candaithe). An chuid is fearr den dá shaol.

Nó traenáil líonraí dénártha ar LAPanna ón tús. Scipeáil GPUanna ar fad. Seo é cur chuige Dweve.

Níl aon fhreagra uilíoch ann. Déanann an dogmatacht "teastaíonn GPU uait" neamhaird ar na mionsonraí. Is cuma faoi d'ualach oibre, do thimpeallacht imscartha, do shrianta buiséid, agus do roghanna ailtireachta. Déan cinneadh eolasach, ní cinneadh athfhillteach.

An todhchaí (éabhlóid crua-earraí)

Tá an tírdhreach crua-earraí ag athrú:

Sliseanna AI speisialaithe:

TPUanna (Google). Innill néaracha (Apple). ASICanna saincheaptha. Optamaithe d'ualacha oibre sonracha AI. Ní LAP íon ná GPU íon iad.

D'fhéadfadh siad seo bheith i gceannas ar nideoga sonracha. Ach fanann LAPanna agus GPUanna mar chuspóir ginearálta. Agus tagann rioscaí glasála díoltóra le sliseanna speisialaithe. Nuair a rialaíonn Google TPUanna agus nuair a rialaíonn Apple innill néaracha, bíonn tú ag brath ar a dtreochlóga agus a bpraghsáil. Ba cheart do chuideachtaí Eorpacha na himpleachtaí ceannasachta seo a mheas.

Síneadh AI LAP:

Intel AMX (Síneadh Casta Maitríse). ARM SVE2. Síneadh veicteora RISC-V. LAPanna ag cur treoracha AI-shonracha leo.

Tá an bhearna LAP-GPU don AI ag cúngú. Go háirithe d'oibríochtaí slánuimhreacha agus dénártha.

Tugann na síntí seo luasghéarú iolrúcháin mhaitríse isteach go díreach i LAPanna. Ní chomh cumhachtach le GPUanna tiomnaithe le haghaidh snámhphointe, ach leordhóthanach do go leor ualach oibre. Agus tagann siad caighdeánach, gan aon chrua-earraí breise ag teastáil.

Ailtireachtaí atá tíosach ar fhuinneamh:

De réir mar a ardaíonn costais fuinnimh, is mó an tábhacht a bhaineann le héifeachtúlacht ná le feidhmíocht amh. Oibríochtaí dénártha. Sliseanna néaramorfacha. Ríomhaireacht analógach.

Is í an éifeachtúlacht a bheidh i bhfabhar amach anseo. Luíonn LAPanna le hoibríochtaí dénártha leis an treocht seo níos fearr ná snámhphointe GPU atá an-tógálach ar chumhacht.

Cuireann praghsanna fuinnimh na hEorpa agus rialacháin inbhuanaitheachta dlús leis an aistriú seo. Nuair a bhíonn tú ag íoc rátaí préimhe as leictreachas agus ag tabhairt aghaidh ar shainorduithe laghdaithe carbóin, ní rogha é an éifeachtúlacht. Is dualgas é. Is é an crua-earraí a dhéanann níos mó le níos lú cumhachta a bhuaigh.

Fás ríomhaireachta imeall:

AI ag bogadh ón scamall go dtí an t-imeall. Fóin. Gluaisteáin. Feistí Idirlín na Rudaí (IoT). Tá LAPanna acu seo, ní GPUanna.

Éiríonn AI éifeachtach ar LAPanna éigeantach, ní roghnach.

Cuireann an tAcht AE um AI béim ar phróiseáil áitiúil d'fheidhmchláir áirithe. Tagann ríomhaireacht imeall le AI bunaithe ar LAP go hiomlán leis na ceanglais rialála seo. Fanann sonraí áitiúil. Tarlaíonn próiseáil go háitiúil. Tá comhlíonadh níos simplí.

Figiúirí feidhmíochta ón bhfíorshaol

Bímis níos cruinne le tomhais iarbhír:

Líonraí néaracha snámhphointe:

GPU: 100-300 TFLOPS (trilliún oibríocht snámhphointe in aghaidh an tsoicind). Sroicheann samhlacha ardleibhéil ar nós an A100 624 TFLOPS le haghaidh FP16. Téann an H200 níos airde fós.

LAP: 1-5 TFLOPS

Buaiteoir: GPU (20-100× níos tapúla)

Tá an bhearna doshéanta. Maidir le líonraí néaracha traidisiúnta, tá GPUanna i gceannas. Sin an fáth a cheap gach duine go dteastaíonn GPUanna uait le haghaidh AI. Ar feadh deich mbliana, bhí an ceart acu.

Líonraí néaracha dénártha:

GPU: Teoranta mar gheall ar easpa crua-earraí speisialaithe. Úsáideann INT8 nó eithní saincheaptha. B'fhéidir 10-30× níos tapúla ná LAP le haghaidh oibríochtaí dénártha.

LAP: Tá XNOR agus popcount dúchasach. An-tapa. Comhthreomhar trasna croíleacáin le AVX-512.

Buaiteoir: Is féidir le LAP GPU a mheaitseáil nó a shárú (Dweve Loom: 40× níos tapúla ar LAP ná trasfhoirmeoirí ar GPU)

Ní draíocht é an t-aistriú seo. Is matamaitic agus dearadh crua-earraí le chéile é. Imríonn oibríochtaí dénártha le láidreachtaí LAP ar an mbealach céanna a imríonn iolrú snámhphointe le láidreachtaí GPU.

Latency:

GPU: Forchostas aistrithe PCIe. 1-10ms díreach le haghaidh gluaiseacht sonraí.

LAP: Gan aon fhorchostas aistrithe. Tátal fo-mhilleasoicind indéanta.

Buaiteoir: LAP d'fheidhmchláir íseal-latency

Tá an forchostas PCIe sin seasta. Ní dhíothaíonn aon mhéid optamaithe é. D'fheidhmchláir fhíor-ama ina mbíonn gach milleasoicind tábhachtach, buaíonn LAPanna de réir dearaidh.

Éifeachtúlacht chumhachta (oibríochtaí in aghaidh an bhata):

GPU: ~500-1000 GFLOPS/W (snámhphointe)

LAP: ~100-200 GFLOPS/W (snámhphointe)

Buaiteoir: GPU le haghaidh snámhphointe

Athraíonn oibríochtaí dénártha é seo:

LAP le dénártha: 10-50× oibríochtaí/bata níos fearr ná GPU le snámhphointe

Buaiteoir: LAP le hoibríochtaí dénártha

Nuair a bhíonn costais leictreachais na hEorpa 3-4× níos airde ná i SAM, aistríonn na difríochtaí éifeachtúlachta seo go díreach go costais oibriúcháin. Éiríonn an cás gnó le haghaidh AI bunaithe ar LAP láidir go tapa.

Cad is gá duit a mheabhrú

Mura dtógann tú rud ar bith eile uaidh seo, cuimhnigh:

  • 1. Tá GPUanna chun tosaigh ar AI snámhphointe. Comhthreomhaireacht iolraithe maitrísí. Croíleacáin tensor speisialaithe. 20-100× níos tapúla ná LAPanna do líonraí néaracha traidisiúnta. I gcás ualaí oibre snámhphointe, is iad an rogha shoiléir iad.
  • 2. Sáraíonn LAPanna ar rudaí éagsúla. Loighic chasta. Latency íseal. Oibríochtaí slánuimhir/dénártha. Infhaighteacht uilíoch. Próiseáil áitiúil chomhlíontach GDPR.
  • 3. Athraíonn líonraí dénártha an chothromóid. Is oibríochtaí dúchasacha LAP iad XNOR agus popcount. Is féidir le LAPanna feidhmíocht GPU a mheaitseáil nó a shárú d'AI dénártha. Is é an t-athrú matamaiticiúil a thugann buntáiste d'ailtireacht LAP.
  • 4. Tá tábhacht ag baint le tomhaltas cumhachta de réir a chéile. GPUanna: 300-700W inniu, suas le 15,360W réamh-mheasta. LAPanna: 50-150W. Oibríochtaí dénártha: laghdú 96% ar chumhacht. Le costais fuinnimh Eorpacha agus sainorduithe inbhuanaitheachta, ní rogha é éifeachtúlacht.
  • 5. Ní crua-earraí amháin atá i gceist le costas. Cumhacht. Fuarú. Bonneagar. Ceannasacht slabhra soláthair. Ábhar TCO. Is minic go mbíonn LAPanna níos saoire d'ionduchtú ar scála, go háirithe le líonraí dénártha.
  • 6. Roghnaigh bunaithe ar an ualach oibre, ní ar dhogma. Ag traenáil samhlacha móra snámhphointe? GPU. Ionduchtú ag an imeall? LAP. Líonraí dénártha? LAP. Comhlíonadh GDPR? LAP. Oibríonn cur chuige hibrideach freisin.
  • 7. Is é an todhchaí a thugann tacaíocht don éifeachtúlacht. Ríomhaireacht imeallach. Costais fuinnimh ag ardú. Rialacháin inbhuanaitheachta an AE. Ceanglais an Achta AI. Tá ailtireachtaí atá fabhrach do LAP ag ardú, ní ag meath.
Braitheann an próiseálaí ceart ar chruth an ualaigh oibre, ar an mbuiséad cumhachta, ar an latency, ar an gcostas iomlán, ar an suíomh imlonnaithe, agus ar shrianta ceannasachta.

An bunlíne

Bhain GPUanna an chéad bhabhta d'AI amach toisc gur dearadh líonraí néaracha le haghaidh oibríochtaí snámhphointe agus comhthreomhaireacht ollmhór. Tógadh GPUanna go díreach chuige sin. Chruthaigh deich mbliana de cheannasacht an toimhde go dteastaíonn GPUanna le haghaidh AI. I gcás ualaí oibre snámhphointe, tá sé seo fós fíor.

Ach tá AI ag forbairt. Líonraí dénártha. Chandú slánuimhir. Ailtireachtaí éifeachtúla. Tugann siad seo buntáiste do LAPanna. D'athraigh na bunús matamaiticiúla, agus leo sin, an crua-earraí is fearr.

Tá an scéal "teastaíonn GPU uait" as dáta do go leor cásanna úsáide. Ionduchtú imeallach? Líonraí dénártha? Imlonnaú íogair ó thaobh costais? Comhlíonadh GDPR? Tá LAPanna iomaíoch. Go minic níos fearr.

Tá tírdhreach na crua-earraí ag athrú. Sliseanna speisialaithe ag teacht chun cinn. Eisíontais AI LAP ag teacht. Tá deireadh le monaplacht GPU. Tá buntáistí ar leith ag cuideachtaí Eorpacha san athrú seo: tugann rialacháin dhian um chosaint sonraí tacaíocht do phróiseáil áitiúil LAP, luathaíonn costais arda fuinnimh éifeachtúlacht, agus baineann tairbhe le hábhair imní ceannasachta crua-earraí ó sholáthar éagsúil LAP.

Cuidíonn tuiscint ar a bhfuil gach próiseálaí maith ann leat roghnú i gceart. Ní bunaithe ar fhothrom. Bunaithe ar do riachtanais iarbhír. Feidhmíocht, cumhacht, costas, srianta imlonnaithe, comhlíonadh rialála.

Tá GPUanna fós i gceannas ar thraenáil samhlacha móra snámhphointe. Ach ionduchtú? Imlonnaú? Ríomhaireacht imeallach? Tá an chothromaíocht ag aistriú. Agus is oibríochtaí dénártha ar LAPanna atá i gceannas ar an aistriú sin. Ní bheidh an chéad deich mbliana eile d'AI cosúil leis an gceann deireanach. D'fhéadfadh sé go mbeadh na crua-earraí a raibh an chuma orthu go raibh siad riachtanach roghnach. D'fhéadfadh sé go mbeadh na crua-earraí a raibh an chuma orthu go raibh siad neamhleor iontach.

Ní GPU nó LAP é do rogha. Is éard atá ann ná tuiscint ar cén t-ualach oibre a oireann do cén crua-earraí. Agus de réir a chéile, tá an tuiscint sin ag díriú i dtreo LAPanna do níos mó cásanna úsáide ná mar a mholann an gnáth-eagna.

Ar mhaith leat AI atá optamaithe do LAP a fheiceáil i mbun gnímh? Fiosraigh Dweve Loom. Réasúnaíocht srianta dénártha ar LAPanna caighdeánacha. 40× níos tapúla ná samhlacha claochladáin ar GPUanna. Laghdú 96% ar chumhacht. Comhlíontach le GDPR de réir dearadh. An cineál AI a oibríonn leis an gcrua-earraí atá agat cheana féin. Tógtha san Eoraip do riachtanais na hEorpa.