Tagarmharc is conradh le hainmneoir
An uimhir a dhéanann dearmad ar a hainmneoir
Is féidir toradh tagarmhairc a thomhas go cruinn agus fós an cheist cheart a fhreagairt go mícheart. Is é an gnáthchiontóir ná lasc ama lochtach nó innealtóir mímhacánta. Is é an t-ainmneoir a d’imigh as radharc idir an fhearas tástála agus an sleamhnán cur i láthair. Cé go bhfuil an chuma air gur comparáid é “dhá oiread chomh tapa”, ní deir sé cad é an obair atá dhá oiread chomh tapa, ar cén meaisín, le cén bogearra, faoi cén coinníoll cáilíochta, i gcoinne cén bhunlíne, ná do cén úsáideoirí. Bain na coinníollacha sin agus is blúire snasta é uimhir feidhmíochta. D’fhéadfadh sé a bheith fíor go huimhriúil. Ach ní insíonn sé do cheannaitheoir ná d’oibreoir cad is féidir leo a bheith ag súil leis.
Is é an t-ainmneoir an obair i gcoinne a gcuirtear an toradh in iúl. Maidir le tréchur, is é an obair chríochnaithe agus an t-am a n-áirítear an chríochnú. Maidir le latency, is é an sainmhíniú ar an iarratas, an cosán san áireamh, agus an pobal breathnóireachta. Maidir le cruinneas, is é an tacar lipéadaithe, an riail lipéid, agus an t-aonad atá á mheas. Maidir le fuinneamh, is é teorainn an chórais tomhaiste agus an obair a sheachadtar laistigh den teorainn sin. Maidir le costas, is é an tréimhse costais, na hacmhainní san áireamh, agus an méid oibre úsáidí. Bíonn tagarmharc macánta nuair a thaistealaíonn a uimhreoir agus a ainmneoir le chéile.
Sin an fáth gur fearr tagarmharc a chaitheamh mar chonradh. Ainmníonn an conradh an cheist, an t-ualach oibre, an raon feidhme, na crua-earraí agus na bogearraí, an mhéadracht, an bhunlíne, an t-éiginnteacht agus an modh trína bhféadfadh páirtí eile an toradh a sheiceáil. Is féidir le conradh a bheith cúng. Is féidir é a bheith taiscéalach. Is féidir é a bheith úsáideach ach amháin d’imscaradh amháin. Rud nach féidir leis a bheith ná uimhir iontach a bhfágtar na coinníollacha ag an léitheoir le buille faoi thuairim a thabhairt. Is drochbhealach é buille faoi thuairim chun airgead poiblí a leithdháileadh, agus drochbhealach níos measa fós é chun seirbhís a dhearadh a chaithfidh duine eile a choinneáil beo.
Uaireanta déantar magadh faoin nós Eorpach sainmhínithe a scríobh síos mar pháipéarachas. In obair thomhais, is iad na sainmhínithe an chuid a choinníonn páipéarachas ó bheith ina bhéaloideas. Ní aguisín riaracháin é an tábla tagarmhairc ar an toradh. Is é a chárta aitheantais é.
Léigh an t-aonad sula léann tú an ceannlíne
Tosaigh leis an aonad, ach ná stad ansin. Insíonn iarratais in aghaidh an tsoicind, comharthaí in aghaidh an tsoicind, milleasoicindí, giúl in aghaidh an cheist, euro in aghaidh an mhíle taifead agus pointí céatadáin rud éigin duit. Ní insíonn aon cheann acu duit cad a iarradh ar an gcóras a dhéanamh. Is féidir le toradh 100 iarratas in aghaidh an tsoicind cur síos a dhéanamh ar iarratais bheaga i dtaisce nó ar iarratais mhóra nach bhfuil i dtaisce a chuimsíonn aisghabháil, bailíochtú agus aistriú daonna. Is féidir le latency 20 milleasoicind a chlúdach eithne amháin nó cosán iomlán cinnteoireachta. Is doras é an t-aonad. Is é an t-ualach oibre an seomra taobh thiar de.
Abair go ndeir sleamhnán soláthair go bhfuil seirbhís nua 40 faoin gcéad níos tapúla ná an ceann atá ann cheana. Ní fianaise é an abairt go fóill. Teastaíonn uaidh ar a laghad an oibríocht atá á huainiú, méid agus dáileadh an ionchuir, an obair atá eisiata ón gclog, an comhreathachas, an stát téimh, na leaganacha bogearraí, na crua-earraí, agus an chumraíocht bhunlíne. Teastaíonn an coinníoll cáilíochta uaidh freisin. Má fhilleann an cosán níos tapúla níos lú torthaí bailí, má thiteann sé ionchuir fhada nó má scipeann sé céim bhailíochtaithe chostasach, tá an t-uimhreoir déanta níos lú trí obair a athrú.
Ní iarratas é seo ar thábla ollmhór sula bhféadfaidh aon duine labhairt. Is iarratas é na réimsí beaga a aithint a athraíonn brí an éilimh. D’fhéadfadh go mbeadh cruth taifid, foinse ionchuir, polasaí bailíochtaithe, tiomsaitheoir agus próiseálaí ag teastáil le haghaidh tagarmharc beag parsála. D’fhéadfadh go mbeadh múnla, beachtas, baisc, cás, sprioc cháilíochta agus teorainn chumhachta ag teastáil le haghaidh tagarmharc réasúnaíochta. D’fhéadfadh go mbeadh sainmhíniú cáis, clog seirbhíse, riail ródaithe agus cosán ardaithe ag teastáil le haghaidh scuaine earnála poiblí. Tá na réimsí difriúil. Níl an oibleagáid iad a ainmniú.
Is disciplín úsáideach anseo: scríobh an toradh mar abairt a sheasfadh an dara léitheoir. “Faoin ualach oibre seo agus faoin gceanglas cáilíochta seo, ar an gcóras seo agus ar an leagan seo, ba é seo an luach tomhaiste, leis an athraitheacht seo.” Mura féidir an abairt a chríochnú gan focail ar nós tipiciúil, is fearr, cosúil le táirgeadh nó ionadaíoch, níl an modh críochnaithe. Is féidir leo sin a bheith bailí, ach teastaíonn sainmhíniú oibríochtúil uathu, ní ton te.
Cuid den toradh is ea an raon feidhme
Freagraíonn an raon feidhme ceist shimplí: cad a chlúdaíonn an toradh seo, agus cad a fhágtar lasmuigh den fhráma? I meastóireacht fhoghlaim meaisín, áirítear sa raon feidhme an tasc, an tacar sonraí, an deighilt, an teanga, fad an ionchuir, an cás oibriúcháin agus na roghanna cur chun feidhme a cheadaítear. I seirbhís bogearraí, áirítear ann an bealach, na stórais sonraí, an líonra, an taisce agus an obair a dhéanann foireann iartheachtach tar éis don chríochphointe tomhaiste filleadh. Níor cheart go n-éireodh toradh a thomhaistear ar chiseal amháin ina gheallúint faoin tseirbhís iomlán go ciúin.
Déanann MLCommons é seo infheicthe ina cháipéisíocht MLPerf Inference. Deighleann an treoir aighneachta idir chineálacha córais lárionad sonraí agus imeall, liostaíonn sí cásanna ar nós as líne, freastalaí, idirghníomhach, sruth aonair agus sruth iolrach, agus déanann sí idirdhealú idir rannán dúnta agus rannán oscailte. Tá an rannán dúnta ceaptha le haghaidh comparáide úll le húll agus an tsamhail agus an socrú tagartha céanna in úsáid. Ceadaíonn an rannán oscailte roghanna ar nós athoiliúint nó ionadú samhla. Ní ceachtar acu an rannán ceart go huilíoch. Freagraíonn siad ceisteanna éagsúla. Ní léargas leathan é ceannlíne a mheascann iad. Is earráid chatagóire é le clóghrafaíocht den scoth.
Léiríonn an cháipéisíocht chéanna cén fáth a dteastaíonn taobh cáilíochta sainráite ó thagarmharc. Ainmníonn iontráil liostaithe ResNet50 an tacar bailíochtaithe ImageNet-2012, méideanna an tacair sonraí agus an liosta samplaí ceistneacha, cruinneas tagartha agus srian ar fholáirimh fhreastalaí. I gcás na hiontrála liostaithe ResNet50, tugann an leathanach tacar bailíochtaithe de 50 000 íomhá, liosta samplaí ceistneacha de 1 024, cruinneas tagartha de 76.46 faoin gcéad agus srian 15 ms ar fholáireamh freastalaí. Ní mionsonraí iad na réimsí sin do dhaoine a bhaineann taitneamh as rialacha a léamh. Míníonn siad cad a ceadaíodh don luas tuairiscithe a chiallú. Athraigh an tacar sonraí, an cás nó an ceanglas cáilíochta agus tá an chomparáid athraithe, fiú má tá cuma eolach ar ainm na samhla.
Ba cheart do cheannaitheoir Eorpach a bheith amhrasach faoi raon feidhme a thugtar le tuiscint le lipéad táirge. Ní shainíonn “ardán AI”, “luasaire” agus “grád fiontair” an obair. D’fhéadfadh córas atá ar fheabhas ag oibríocht theoranta a bheith go díreach mar a theastaíonn ó sheirbhís. D’fhéadfadh córas a mhaíonn go gclúdaíonn sé gach rud a bheith tar éis beagnach aon rud a thomhas a bhfuil cosúlacht aige leis an tseirbhís. Tá fírinne chúng níos sláintiúla ná ceo uilíoch.
Athraíonn an clúdach brí an rud
Ní nóta coise é an clúdach faoi cé acu a bhí an tacar tástála mór nó nach raibh. Déanann sé cur síos ar cé hiad na cásanna agus cé na cúinsí a thagann isteach sa tomhas. Is féidir le tagarmharc go leor samplaí a chlúdach ó dháileadh caol amháin agus fós beagán a rá faoi na himill atá tábhachtach in oibriú. Os a choinne sin, is féidir le tacar beag roghnaithe go cúramach modh teipe tábhachtach a nochtadh gan tacú le héileamh ginearálta feidhmíochta. Is cinneadh dearaidh é an rogha. Ní mór é a lua mar sin.
Tá creat an OECD maidir le hionstraimí meastóireachta AI a thréithriú úsáideach toisc go ndiúltaíonn sé meastóireacht a laghdú go scór amháin. Molann sé 18 ghné, lena n-áirítear clúdach, cuspóir, réadúlacht, bailíocht, iontaofacht, trédhearcacht agus na coinníollacha faoina bhféadfar torthaí a léirmhíniú. Fiafraíonn an clúdach an ionadaíonn an mheastóireacht ar a bhfuil sé i gceist aici a thomhas. Déanann an cuspóir idirdhealú idir tagarmharc atá beartaithe do thaighde agus ceann atá beartaithe do chomhréireacht nó d'úsáid eile. Fiafraíonn an réadúlacht an fadhb bhréagán, suíomh insamhlaithe nó saotharlainne, nó fíorshaol é an suíomh. Ní dhéanann na hidirdhealuithe seo tagarmharc níos laige. Déanann siad a éileamh soiléir.
Áirítear sa chlúdach freisin na cásanna a fhágtar as an meastóireacht. Féadfaidh seirbhís meánfholaíocht a thuairisciú tar éis amanna teoranta a bhaint. Féadfaidh aicmitheoir cruinneas a thuairisciú tar éis lipéid débhríocha a scriosadh. Féadfaidh córas aisghabhála comhaireamh a dhéanamh ar cheisteanna a bhfuil doiciméad ábhartha amháin ar a laghad acu. Féadfaidh píblíne íomhánna comhaid truaillithe a scipeáil. Is féidir gach eisiamh a chosaint. Ní mór don toradh a rá cad a baineadh agus cén fáth. Seachas sin, éiríonn an t-ainmneoir go ciúin ina liosta cásanna a bhí áisiúil a chríochnú.
Seo an áit a n-éiríonn an t-ainmneoir polaitiúil, fiú sula n-úsáideann aon duine an focal polaitíocht. Faigheann an daonra a áirítear tairbhe an tomhais. Faigheann an daonra a fhágtar as scéal faoi chóras nach bhféadfadh cur síos a dhéanamh orthu. Tá a fhios ag institiúidí poiblí Eorpacha cheana féin é seo ó staitisticí oifigiúla. Leagann Cód Cleachtais Staitistiúil Eorpach Eurostat síos 16 phrionsabal agus 84 tháscaire don timpeallacht institiúideach, do na próisis agus d'aschuir. Soláthraíonn a Chreat um Dhearbhú Cáilíochta modhanna agus uirlisí, agus insíonn tuarascálacha cáilíochta d'úsáideoirí conas a bailíodh agus a bhíodh bailíochtaithe na sonraí. Ní hé an teachtaireacht don AI go gcaithfidh gach múnla a bheith ina oifig staitistiúil. Is é go bhfuil scéal infheicthe táirgeachta agus cáilíochta ag teastáil ó uimhir atá beartaithe do chinntí poiblí.
Ní geata amháin é an cruinneas
Is minic a phéireálann éilimh feidhmíochta luas le huimhir cháilíochta amháin, agus ansin déileálann siad leis an bpéire mar rud iomlán. Is teaghlach ceisteanna de ghnáth í an cháilíocht. An gcomhlíonann an t-aschur sainmhíniú na tasc? An gcaomhnaíonn sé srianta riachtanacha? An dteipeann sé go sábháilte nuair a bhíonn fianaise in easnamh? An n-iompraíonn sé go hinghlactha ar fud an daonra ábhartha? An bhfanann sé laistigh den teorainn cháilíochta agus an córas faoi ualach? Ní réiteach níos tapúla é freagra tapa a theipeann ar an tasc. Is ualach oibre éagsúil é ag caitheamh an ainmfhocail chéanna.
Tá struchtúr MLPerf teagascach toisc go suíonn a rith feidhmíochta taobh le bailíochtú cruinnis agus ceanglais shonracha mhúnla. Insíonn treoir an aighneachta do rannpháirtithe an rannán, an cineál córais agus an cás a shainaithint, an tagarmharc beartaithe a rith, cruinneas a bhailíochtú i gcoinne tairseacha agus ansin aighneacht sheiceáilte a ullmhú. Liostaíonn leathanach an tagarmhairc cruinneas tagartha agus coinníollacha folaíochta nó tréchur in aghaidh na tasc. Tá an scaradh praiticiúil. Coinníonn sé córas ó bhua a fháil sa cholún feidhmíochta trí chailliúint go ciúin ar an tasc.
Teastaíonn ainmneoir ón gcruinneas féin. Is féidir le "98 faoin gcéad cruinn" céatadán taifead, comharthaí, íomhánna, iarratais nó cinntí a chiallú. Is féidir leis meánú micrea nó macra a úsáid. Is féidir leis staonadh a chomhaireamh mar earráid, mar dhiúltú sábháilte, nó mar thoradh neamhthomhaiste. Is féidir leis comparáid a dhéanamh le lipéid a chruthaigh léirmheastóir amháin nó roinnt. Ba cheart go n-ainmneodh cárta tagarmhairc an t-aonad, an riail lipéid, an comhiomlánú, an mhuinín nó an éagsúlacht, agus aon tairseach a dhéanann tomhas ina chinneadh scaoilte.
Ná húsáid uimhir cháilíochta mar cheadúnas maisiúil. Féadfaidh múnla tairseach foilsithe a chomhlíonadh agus fanacht mí-oiriúnach do sheirbhís ar leith toisc go mbíonn an tasc, an daonra nó próifíl an dochair difriúil. Os a choinne sin, d’fhéadfadh scór comhiomlán níos ísle a bheith inghlactha d’uirlis dhréachtaithe a choinníonn duine mar údar, agus an scór céanna do-ghlactha do gheata uathoibríoch. Is gaol é cáilíocht idir aschur, cuspóir agus iarmhairt.
Ní uimhir amháin é an t-am
Is minic a chuirtear an fholáis i láthair amhail is go bhfuil luas amháin ag córas. Bíonn dáileadh ag fíor-chórais. Seans go n-íocfaidh an chéad iarratas costas tosaithe. Féadfaidh taisce iarratais níos déanaí a athrú. Féadfaidh úsáideoirí comhthráthacha dul in iomaíocht le haghaidh cuimhne nó ceangal bunachair. Féadfaidh ionchur fada cosán difriúil a ghlacadh ó cheann gearr. Féadfaidh an meán feabhsú agus an t-eireaball ag dul in olcas. Más é an t-eireaball an áit a gcaillfidh seirbhís a sprioc-am, is seachrán le haonad é an meán.
Deir tuarascáil úsáideach fholáis cad a rinneadh a uainiú agus conas a rinneadh na breathnuithe a achoimriú. Féadfaidh sé meán, ceathairílí uachtaracha, ráta ama-ama agus líon na n-iarratas a áireamh. Ba cheart dó a rá an raibh iarratais théamh eisiata, an raibh athiarratais san áireamh, agus an mbaineann am scuaineála nó am líonra leis an gcosán tomhaiste. Níl na roghanna sin idirmhalartaithe. Is féidir le tagarmharc comhpháirte a bheith luachmhar, ach ní mór é a insint mar iompar deireadh-go-deireadh.
Tá gaiste cosúil leis sin ag tréchur. Is féidir ráta ard a bhaint amach trí obair a bhaitsiú, comhthráthacht a mhéadú nó ceanglas cáilíochta a mhaolú. D’fhéadfadh sé sin a bheith díreach ceart do phost as líne. D’fhéadfadh sé a bheith gan úsáid do sheirbhís idirghníomhach a chaithfidh freagra a thabhairt ar gach iarratas laistigh de sprioc-am. Ba cheart don tagarmharc an cás agus an pointe oibriúcháin a lua, agus ansin míniú a thabhairt ar cad a tharlódh dá n-imeodh an t-éileamh uaidh. Níl aon náire i bpointe oibriúcháin caol. Tá náire ann má ligtear air gurb é an léarscáil iomlán é.
Tá taobh daonna ag an am freisin. D’fhéadfadh seirbhís a fhilleann go tapa ach a chruthaíonn níos mó oibre athbhreithnithe, ceartaithe nó achomhairc a bheith níos moille ó dhearcadh na hinstitiúide. Féadfaidh tagarmharc a stopann an clog roimh an ngéilleadh a chur ar an gcóras tomhaiste breathnú gasta agus scuaine ag carnadh ar an tseirbhís iarbhír. Ba cheart don ainmneoir leanúint leis an obair go dtí go bhfreagraítear an cheist atá á cur. Seachas sin, tá an staduaire ag tomhas oileáin.
Tá crua-earraí agus bogearraí mar chuid den uimhreoir
Ní timpeallacht in-atáirgthe é “ar fhreastalaí”. Is féidir le glúin phróiseálaí, tacar treoracha, luasghéaraitheoir, cuimhne, stóráil, staid theirmeach, teorainn chumhachta, córas oibriúcháin, tiománaí, tiomsaitheoir, am rite, leabharlann agus cumraíocht toradh a athrú go léir. Is féidir le formáid mhúnla, socrú chainníochtaithe, méid baits, roghnú eithne nó polasaí snáithe freisin. Ní gá don tagarmharc gach cábla a liostú. Ní mór dó na codanna a d’fhéadfadh an tomhas a athrú a shainaithint.
Tugann MLPerf an socrú iomlán tomhaiste ar an gcóras faoi thástáil agus eagraíonn sé torthaí de réir chineál an chórais agus chatagóir infhaighteachta. Tá an foclóir sin úsáideach thar MLPerf. Tá teorainn ag córas faoi thástáil. Deir an teorainn cé na crua-earraí agus bogearraí atá san áireamh, cé na seirbhísí atá seachtrach, agus cé na hoibre atá fágtha ar lár. Tá brí dhifriúil ag figiúr cumhachta a thomhaistear ag an mballa ná figiúr a chomhaireamh ach luasghéaraitheoir. Tá brí dhifriúil ag folaí a thomhaistear laistigh d’eithne ná ceann a chuimsíonn sceidealú iarratas.
Is cuma le leaganacha toisc gur comparáid trasna stát é tagarmharc, ní airí gan am d’ainm táirge. Taifead leagan an mhúnla nó an fheidhmchláir, leaganacha spleáchais, bratacha tiomsaitheora, tiománaí agus firmware áit a mbíonn tionchar acu ar an toradh. Taifead an chumraíocht a roghnaigh inneall cúil nó beachtas. Má roghnaíonn am rite eithne dhifriúil ar mheaisín eile, is cuid den toradh é sin, ní sonra cur chun feidhme le glanadh suas níos déanaí.
Ní cuireadh é an nochtadh crua-earraí chun blagphost a iompú ina chatalóg páirteanna. Is bealach é chun comhionannas bréagach a chosc. Ní gá do cheannaitheoir cúram a dhéanamh faoi gach treoir má bhaineann an t-éileamh le seirbhís iomlán. Caithfidh siad a fháil amach an bhfuil an chomparáid ag cuimsiú an obair chéanna, an cruinneas céanna, an bealach ionchuir céanna agus córas is féidir a fháil agus a oibriú i suíomh Eorpach beartaithe.
Is gealltanais iad bunlínte
Is í an bhunlíne an chomparáid a thugann treo don toradh. Gan í, féadfaidh uimhir cur síos a dhéanamh ar chóras ach ní ar fheabhsú. Caithfidh an bhunlíne an cheist chéanna a fhreagairt faoi choinníollacha inchomparáide. Má úsáideann an cosán nua tiomsaitheoir níos nuaí, dáileadh ionchuir éagsúil nó sprioc cháilíochta eile, féadfaidh an toradh a bheith suimiúil fós, ach níl an chomparáid glan a thuilleadh. Abair cad a d'athraigh. Is féidir leis an léitheoir cinneadh a dhéanamh ansin an bhfuil an difríocht úsáideach.
Is gníomh léirmhínithe é roghnú bunlíne. Déan comparáid leis an gcóras reatha a úsáideann úsáideoirí i ndáiríre, le cur i bhfeidhm tagartha, le heisiúint roimhe seo, nó le teorainn theoiriciúil, agus foghlaimeoidh tú rudaí éagsúla. Is féidir le córas nua a bheith níos fearr ná an tagairt agus níos measa ná an tseirbhís atá á hionadú aige. Is féidir leis a bheith níos tapúla ar thástáil ghlan agus níos moille nuair a chuirtear bailíochtú agus stóráil san áireamh. Ba cheart don tagarmharc an bhunlíne a ainmniú agus a mhíniú cén fáth a bhfreagraíonn sí an cheist oibríochtúil.
Is minic go mbíonn rithí péireáilte níos faisnéisí ná bua aonair. Coinnigh an t-ualach oibre agus an sainmhíniú meastóireachta seasta, athraigh fachtóir ábhartha amháin, agus taifead an difríocht. Má athraíonn roinnt fachtóirí le chéile, déan cur síos ar an gcomparáid mar phacáiste seachas an éifeacht iomlán a chur i leith comhpháirt amháin. Is cosúil go bhfuil sé seo soiléir go dtí go dtagann uasghrádú, athnuachan sonraí agus polasaí taisce nua san eisiúint chéanna. Bíonn saighead amháin agus trí chúis fhéideartha ag an ngraf ansin, ar mistéir bheag é nár chuir aon duine san áireamh.
Teastaíonn seilfré ó bhunlíne freisin. Is féidir le beatha sonraí, soláthróir, múnla, polasaí nó ardán crua-earraí bogadh. Fanann an chomparáid bailí do na leaganacha agus don tréimhse a ndearnadh tástáil orthu. Níor cheart é a athúsáid mar ráthaíocht reatha gan an conradh a sheiceáil. Seo an áit a bhfaigheann stair leaganacha a luach. Ní teip é toradh atá sáraithe. Is éileamh stairiúil é a bhfuil a choinníollacha le feiceáil i gcónaí.
Ní leithscéal é an t-éiginnteacht
Tá éagsúlacht i ngach tomhas. Tagann roinnt éagsúlachta ón gcóras, roinnt ón ualach oibre agus roinnt ón bpróiseas tomhais. Is féidir le rithí arís agus arís eile é a nochtadh, ach ní mhíníonn athrá amháin an chúis. Féadfaidh taisce te a bheith cobhsaí. Féadfaidh comharsa thorannach a bheith éagobhsaí. Féadfaidh tacar meastóireachta beag raon leathan torthaí inchreidte a tháirgeadh. Féadfaidh tacar níos mó torann samplála a laghdú agus daonra claonta fágtha gan teagmháil. Insíonn éiginnteacht don léitheoir cé chomh fada agus is féidir leis an toradh taisteal go sábháilte.
Tuairiscigh éiginnteacht i bhfoirm atá oiriúnach don éileamh. D'fhéadfadh sé a bheith ina raon thar rithí arís agus arís eile, ina eatramh muiníne, ina earráid chaighdeánach, ina dháileadh ar fholáirimh, ina anailís íogaireachta nó ina liosta teorainneacha aitheanta. Ná cuir eatramh muiníne leis mar go bhfuil cuma uaigneach ar an tábla. Abair cad a athraíodh, cad a coinníodh seasta, agus cad a léiríonn an t-eatramh agus cad nach léiríonn sé. Ní geasa é teanga staitistiúil. Is conradh é faoi éagsúlacht.
Tá dara cineál éiginnteachta ann nach féidir le huimhreacha a bhaint: éiginnteacht faoi cé acu a léiríonn an tomhas an tseirbhís bheartaithe. Féadfaidh toradh a bheith an-bheag ó thaobh éagsúlachta idir rithí agus droch-chlúdach sa saol fíor. Féadfaidh tagarmharc a bheith go hiomlán in-atáirgthe laistigh de shaotharlann agus teangacha, formáidí ionchuir, patrúin seal nó iarmhairtí teipe an imlonnaithe á gcailliúint aige. Ní chruthaíonn torann tomhais íseal bailíocht. Ní dhéanann sé ach an cheist mhícheart a fhreagairt ar bhealach níos comhsheasmhaí.
Ba cheart, dá bhrí sin, an éiginnteacht a chur in aice leis an éileamh, ní i séanadh ag bun an leathanaigh. Má tá tairseach gar don teorainn tomhaiste, is ábhar é sin. Má athraíonn toradh go suntasach faoi mheascán ionchuir eile, is ábhar é sin. Má fhágann an teorainn fuinnimh fuarú nó gluaiseacht sonraí as an áireamh, is ábhar é sin. Seans nach mbeidh an abairt mhacánta chomh buacach céanna, ach tugann sí rud éigin níos fearr ná dóchas don chinnteoir: áit le haghaidh aireachais.
Is slabhra é an t-atáirgeadh, ní cnaipe íoslódála
Is minic a laghdaítear in-atáirgtheacht go dtí foilsiú cóid. Is cuma le cód. Níl ann ach nasc amháin sa slabhra. Teastaíonn ón dara páirtí freisin an t-ualach oibre nó tuairisc dhlíthiúil air, leagan na sonraí, an chumraíocht, an timpeallacht, an t-ordú nó an úim, polasaí an stáit randamaigh, riail an aschuir ionchasaigh, an comhad toraidh agus an modh a úsáidtear chun cinneadh a dhéanamh an n-aontaíonn an rith. Má tá nasc amháin ar iarraidh, seans go n-atáirgeann an dara páirtí turgnamh cosúil leis an gceann tuairiscithe seachas an ceann tuairiscithe féin.
Ba cheart don slabhra idirdhealú a dhéanamh idir athsheinm beacht agus macasamhlú neamhspleách. Úsáideann athsheinm beacht an t-ábhar gabhála, an stát, na hionchuir, an chumraíocht agus an cosán forghníomhaithe chun a sheiceáil an féidir an rith céanna a atógáil. Úsáideann macasamhlú neamhspleách timpeallacht ullmhaithe ar leithligh chun a thástáil an maireann an toradh lasmuigh den mheaisín nó den fhoireann bhunaidh. Is fiú an dá rud. Freagraíonn siad ceisteanna éagsúla. Cruthaíonn toradh atá comhionann beart ar bheart ar ionchur gabhála éileamh láidir aitheantais faoin rith sin. Ní chruthaíonn sé go bhfanfaidh an saol beo gan athrú.
Éascaíonn creat meastóireachta an OECD an t-idirdhealú seo a fheiceáil trí chóir a chur ar chuspóir, réadúlacht, clúdach agus iontaofacht mar ghnéithe ar leith. Is féidir le meastóireacht a bheith den scoth le haghaidh tástála aischéimnithí agus go dona le haghaidh feidhmíocht seirbhíse beo a mheas. Is féidir léi a bheith úsáideach le haghaidh taighde agus míchuí le haghaidh comhréireachta. Ní scriosann atáirgeadh cuspóir. Cuidíonn sé leis an léitheoir an t-éileamh a fhíorú a dtacaíonn an modh leis i ndáiríre.
Maidir le sonraí nach féidir a scaoileadh, foilsigh an teorainn agus an bealach. Déan cur síos ar an daonra, ar an bpróiseas samplála, ar an modh lipéadaithe, ar na rialacha eisiaimh agus ar na seiceálacha bailíochtaithe. Cuir pacáiste atáirgthe sábháilte ar fáil nuair is féidir, agus mínigh cad atá fós faoi chosaint. Is teorainn dhlisteanach é “tá na sonraí faoi rún”, ní modh críochnaithe. Ba cheart go mbeadh an léitheoir fós in ann a thuiscint cad a tomhaiseadh agus cén fáth ar cheart an toradh a ghinearálú nó nach ceart.
Ba cheart d’institiúidí poiblí diúltú do thaibhiú amharclainne
Ní gá d’institiúidí poiblí tagarmharcanna a dhiúltú. Is é atá de dhíth orthu ná tagarmharcanna a dhiúltaíonn a gconradh a lua. Is féidir le taispeántas snasta cabhrú le coiste tuiscint a fháil ar fhéidearthacht. Ní féidir leis ionadach a dhéanamh d’fhianaise faoin tseirbhís a chaithfidh an institiúid a reáchtáil, faoi na daoine a ndéantar freastal orthu agus faoi na teipeanna a chaithfidh sí a dheisiú. Tá tábhacht leis an idirdhealú seo mar go ndéantar taispeántas a bharrfheabhsú le haghaidh teagmháil ghairid, ach déantar seirbhís phoiblí a mheas thar shéasúir, athruithe foirne, achomhairc, cothabháil agus dlí.
Sula gceannaítear, iarr ar an soláthróir an t-ualach oibre a shainiú i dteanga na seirbhíse. Cad a théann isteach sa chóras? Cad a thomhaistear? Cad a fhágtar ar lár? Cén riail cháilíochta a chaithfidh a bheith i bhfeidhm? Cén ról daonna a athbhreithníonn toradh? Conas a aimsítear sruthú? Conas is féidir leis an institiúid a fianaise a onnmhairiú? Cad a tharlaíonn nuair a athraíonn an tsamhail, an fhoinse, an soláthróir nó an polasaí? Cén leagan ar a ndéantar an chomparáid? Cad é an cosán rolladh siar? Féadfaidh soláthróir freagra a thabhairt ar chuid de na ceisteanna seo le conradh, cuid acu le tástáil agus cuid acu le teorainn mhacánta. Tá an meascán sin níos sláintiúla ná freagra a dhéantar as aidiachtaí amháin.
Déanann an tAcht AE um AI an pointe seo i dteanga dhlíthiúil do chórais ardriosca. Éilíonn Airteagal 15 leibhéal cuí cruinnis, láidreachta agus cibearshlándála, le feidhmíocht chomhsheasmhach sna gnéithe sin ar feadh an tsaoilré. Ní féidir le tagarmharc an oibleagáid dhlíthiúil iomlán a bhunú leis féin. Is féidir leis tacú le cuid den fhianaise má tá a raon feidhme, a choinníollacha cáilíochta agus a shuíomh sa saolré soiléir. Bheadh sé ina earráid ainmneora eile scór amháin a mheas mar chomhlíonadh. Ainmníonn an dlí an toradh; caithfidh innealtóireacht an cosán a thaispeáint.
Ba cheart don soláthar ceist a chur freisin faoi cé a bheidh ina úinéir ar an tagarmharc tar éis an dámhachtain. D’fhéadfadh tástáil a ullmhaíonn soláthróir a bheith úsáideach, ach teastaíonn go leor faisnéise ón institiúid chun monatóireacht a dhéanamh ar an gcóras ina comhthéacs féin. Teastaíonn uaithi bunlíne is féidir a athreáil nuair a athraíonn leagan, cosán athbhreithnithe nuair a ghluaiseann torthaí agus taifead de na cinntí a dhéantar faoi fheidhmíocht inghlactha. Seachas sin, is scrúdú iontrála é an chéad tagarmharc agus ceadaítear don chóras táirgeachta céim a bhaint amach gan tuilleadh ceisteanna.
Déan an chárta tagarmhairc beag go leor le húsáid
Is féidir modhanna fada a bheith riachtanach. Ní iad an chéad rud a theastaíonn ó léitheoir i gcónaí iad. Is innéacs dlúth don chonradh í cárta tagarmhairc. Is féidir léi suí in aice le toradh i dtuarascáil, i gclár meastóireachta nó i gcomhad soláthair. Ba cheart don chárta an cheist, an t-ualach oibre, an raon feidhme, an córas, an méadrach, an riachtanas cáilíochta, an bhunlíne, an éiginnteacht, an bealach atáirgthe, an t-úinéir agus an truicear éaga nó athraithe a ainmniú. Is féidir leis an modh mionsonraithe a bheith taobh thiar di. Coinníonn an chárta an t-éileamh ó thaisteal ina aonar.
Bíonn cártaí maithe roghnaitheach seachas plódaithe. Cuireann siad na réimsí atá in ann léirmhíniú a athrú chun tosaigh, ansin nascann siad le pacáiste na fianaise. D’fhéadfadh cárta latency méid ionchuir, comhreathachas, peircintíl, téamh suas, leagan agus riail ama amach a chur chun tosaigh. D’fhéadfadh cárta fuinnimh teorainn an chórais, an t-ualach oibre, an ionstraim tomhais, an fad agus an bonneagar eisiata a chur chun tosaigh. D’fhéadfadh cárta cruinnis daonra, riail lipéid, comhiomlánú, cóireáil staonadh agus déine earráide a chur chun tosaigh. Ní teimpléad seasta é an cruth coiteann. Gealltanas é go bhfaighidh an léitheoir an t-ainmneoir.
Ba cheart don chárta stádas eistéimeolaíoch a mharcáil. An luach tomhaiste, measta, ionchais, beartaithe nó léiriúcháin atá ann? An bhfuil an bhunlíne reatha? An bhfuil an tsraith mheastóireachta ullmhaithe ach gan rith fós? An bhfuil torthaí cosanta toisc go bhfuil sonraí pearsanta in ábhar na tástála? Cuireann na lipéid seo cosc ar mhodh a bheith mearbhall le toradh. Ligeann siad freisin d’eagraíocht dul chun cinn a fhoilsiú gan rath a chruthú. Is faisnéis úsáideach í tástáil ullmhaithe. Ní fianaise í gur éirigh leis an gcóras í.
Ar deireadh, tabhair úinéir agus riail athraithe don chárta. Meathann toradh gan úinéir ina shleamhnán. Fanann toradh gan riail athraithe ar an mballa tar éis don ualach oibre bogadh ar aghaidh. Ní gá don úinéir an figiúr a chosaint go deo. Caithfidh siad a rá cathain ba cheart an t-éileamh a athreáil, a tharraingt siar nó a chúngú. Bíonn tomhas mar chuid d’oibríochtaí nuair a bhíonn údarás ag duine éigin é a choinneáil macánta.
Dhá bhealach mhacánta chun toradh a fhoilsiú
Tá dhá mhodh foilsithe coitianta ann. Is é an chéad cheann comparáid dhian. Socraíonn sé an tasc, na sonraí, an riail cháilíochta, teorainn an chórais agus an bunlíne ionas gur féidir le léitheoir roghanna eile a chur i gcomparáid. Is é an dara ceann tomhas taiscéalaíoch. Fiafraíonn sé cad a tharlaíonn nuair a athraíonn dearadh, ualach oibre nó timpeallacht, agus tuairiscíonn sé na breathnuithe lena dteorainneacha. Is féidir le hobair thaiscéalaíoch a bheith luachmhar sula mbíonn tagarmharc dian ann. Níor cheart di teanga thoraidh chomhréireachta a fháil ar iasacht.
Bíonn comparáidí diana éilitheach mar go ndéanann siad difríochtaí infheicthe. Má athraíonn foireann an tsamhail agus an crua-earraí le chéile, b’fhéidir nach féidir an toradh a chur i leith ceachtar acu. Má tá ualach oibre nua níos réadúla ach nach meaitseálann sé an bunlíne a thuilleadh, ba cheart an t-éileamh a athfhrámú mar thomhas nua. Má fheabhsaíonn optamú luas agus cáilíocht aschuir á athrú ag an am céanna, tuairiscigh an dá thaobh. Ní hé an smacht ná dul chun cinn a chosc. Is é ná scéal dul chun cinn a chosc ón gcoinníoll a rinne é a scriosadh.
Teastaíonn a macántacht féin ó thomhais thaiscéalaíocha. Abair go bhfuil an sampla beag, go bhfuil an timpeallacht sealadach, go bhfuil an t-ualach oibre sintéiseach, nach ndearnadh an toradh a mhacasamhlú go neamhspleách nó go bhfuil an seiceáil cáilíochta neamhiomlán. Ní laigí iad seo le cur i bhfolach go dtí eisiúint snasta. Is iad an t-eolas a chabhraíonn le léitheoir cinneadh a dhéanamh faoi cad atá le déanamh ina dhiaidh sin. Ní gá do chultúr innealtóireachta Eorpach ligean air gur breithiúnas deiridh é gach tástáil. Ní mór dó stop a chur le ceist a ghlaoch freagartha sula léitear an tástáil.
Baineann an dá mhodh leas as cartlann torthaí. Coinnigh seansainmhínithe, cumraíochtaí agus torthaí inaitheanta. Taifead comharbas seachas an t-am atá thart a scriosadh. Is féidir le tagarmharc athraithe a bheith mar an tagarmharc ceart do sheirbhís athraithe, ach ní féidir é a úsáid chun brí an tseantoraidh a athscríobh. Is cuimhne an ainmneora í stair leaganacha.
Ár nóta beag
Ag Dweve, déanaimid cur síos ar Core le cill fhorghníomhaithe agus conradh cinnteachta. Ní hainm an táirge an chuid úsáideach den fhoclóir sin. Is é an t-éileamh go n-iompraíonn oibríocht a hionadaíocht uimhriúil, a backend, a thacar treoracha, a polasaí seolta agus a staidiúir athsheinm mar chuid den chonair atá á meastóireacht. Is é an nós céanna a theastaíonn ó thagarmharc: na coinníollacha a choinneáil ceangailte leis an toradh in ionad cur síos a dhéanamh ar fheidhmíocht amhail is dá mbeadh sí ar snámh os cionn an chórais.
Is nóta deartha beag é seo, ní éileamh faoi imscaradh seachtrach ná toradh tomhaiste. Ní bhraitheann an cheacht níos leithne ar Dweve. Cibé an seirbhís staidrimh phoiblí, rialtóir tionsclaíoch, uirlis teanga nó fréamhshamhail taighde é an córas, tuilleann uimhir muinín trí ainm a chur ar a cuid oibre agus ar a teorainneacha. Is áit amháin é ár gcuid doiciméadachta féin ina ndéanaimid iarracht an teorainn sin a dhéanamh follasach.
Is é an t-ainmneoir an chuid a thaistealaíonn
Is furasta ceannlíne tagarmhairc a chóipeáil. Is deacra an t-ainmneoir a iompar, agus sin an fáth a bhfágtar ina dhiaidh go minic é. Cóipeálann ceannaitheoir figiúr tréchuir isteach i gcás gnó. Feiceann rialtóir scór cruinnis i ndoiciméad. Déanann innealtóir dhá chairt ó ualaí oibre éagsúla a chur i gcomparáid. Déanann iriseoir céatadán a athrá gan an daonra. Faigheann gach léitheoir uimhir a chaill an conradh a rinne brí di.
Níl an deisiú casta, cé go n-éilíonn sé smacht. Ainmnigh an cheist. Sainmhínigh an obair. Luaigh an raon feidhme agus na heisiaimis. Aithnigh an córas agus na leaganacha. Roghnaigh méadrach a oireann don tseirbhís. Coinnigh bunlíne. Tomhais an éagsúlacht. Foilsigh an modh agus an fhianaise. Marcáil an rud nach bhfuil ar eolas fós. Tabhair úinéir don éileamh agus cúis le hathsheoladh. Mura féidir leis an toradh ráiteas leathan a thacú, déan an ráiteas níos cúinge.
Seo mar is féidir leis an Eoraip cur in aghaidh amharclannaíocht taispeántais gan a bheith ina namhaid don uaillmhian. Is féidir le hinstitiúid phoiblí cumas nua a cheannach agus fós a éileamh go ndéanfaí tagarmharc a thugann urraim don tseirbhís. Is féidir le foireann taighde toradh spreagúil a fhoilsiú agus fós an t-ualach oibre a tháirg é a lua. Is féidir le soláthróir cosán tapaidh a thaispeáint agus fós a rá cá stopann an cosán. Ní cosc ar nuálaíocht é raon feidhme macánta. Is é dromchla an bhóthair é a ligeann d’aon duine eile tiomáint.
Is conradh é an tagarmharc le hainmneoir mar go n-insíonn an t-ainmneoir dúinn cad a rinneadh i ndáiríre. Coinnigh in aice leis an uimhir é. Beidh an toradh níos lú draíochta, níos inchomparáide agus i bhfad níos úsáidí. Is malartú cothrom é sin. Tá uimhreacha tuillte ag córais a gcaithfidh daoine brath orthu a mhaireann léitheoireacht mhall.
Nuair a thaistealaíonn méadrach idir dhomhain
Is minic a fhágann uimhreacha tagarmhairc an fhoireann a thomhais iad agus téann siad isteach i gcóras cinnteoireachta éagsúil. Foilsíonn taighdeoir tábla. Casann foireann táirge ró amháin ina sprioc. Casann soláthar an sprioc ina chonradh. Casann oibríochtaí an conradh ina ionchas leibhéal seirbhíse. Athraíonn gach gluaiseacht cad a iarrtar ar an uimhir a dhéanamh. Seans go mbeidh an t-ainmneoir bunaidh fós i láthair sa pháipéar nó san stór, ach tá sé i bhfad ón gcinneadh go sóisialta. Teastaíonn nóta aistriúcháin ó mhéadrach gach uair a thrasnaíonn sé an teorainn sin.
Is féidir an nóta aistriúcháin a bheith simplí. Baineann an toradh seo le tréchur comhpháirte, ní le cásanna críochnaithe. Úsáideann an figiúr cruinnis seo tacar lipéad seasta, ní torthaí beo. Eisiaonn an luach fuinnimh seo teorainn fuaraithe an ionaid sonraí. Is cur i bhfeidhm tagartha é an bunlíne seo, ní an tseirbhís reatha. Cuireann na habairtí seo stop le tomhas úsáideach a bheith ina ghealltanas míthreorach. Déanann siad easaontas níos éasca freisin. Is féidir le léitheoir an teorainn a cheistiú seachas argóint a dhéanamh faoi cé acu an bhfuil an uimhir iontach.
Féadfaidh foirne éagsúla ainmneoirí éagsúla a roghnú d’aon ghnó. Seans go mbeadh cúram ar fhoireann ardáin faoin obair in aghaidh an giúl. Seans go mbeadh cúram ar úinéir seirbhíse faoi chinntí críochnaithe in aghaidh na huaire foircneach. Seans go mbeadh cúram ar údarás poiblí faoi thorthaí cearta, inláimhsithe do dhaonra sainithe agus am freagartha. Ní fhírinní iomaíocha iad seo má ainmnítear gach ceann acu. Tosaíonn an trioblóid nuair a cheadaítear an t-ainmneoir is éasca seasamh isteach don mhisean. Ní dhéanann an croíleacán is tapúla an tseirbhís is fearr go huathoibríoch, ar an mbealach céanna nach ndéanann an tacar tástála is mó an ceann is ábhartha go huathoibríoch.
Sula n-athúsáidtear tagarmharc, fiafraigh cad a bhog: an t-ualach oibre, an t-úinéir, an t-iarmhairt, nó an t-achar ama. Má tá aon cheann acu tar éis bogadh, athsheol an léirmhíniú fiú nuair nach bhfuil an bhunuimhir athraithe. Ní hiarsma é tomhas le hiompar idir seomraí. Is caidreamh é a chaithfear a athnuachan nuair a athraíonn an seomra.
Ba chóir go mbeadh a fhios ag toradh cathain a rachaidh sé in éag
Tá saolré úsáideach ag torthaí. Tagann tagarmharc atá ceangailte le leagan múnla, le híosghabháil foinse nó le cumraíocht crua-earraí chun bheith stairiúil nuair a athraíonn na coinníollacha sin. Ní dhéanann sin an seantoradh bréagach. Athraíonn sé an cheist is féidir leis a fhreagairt. Ba cheart don tuarascáil a rá cén teagmhas a fhágann go bhfuil an t-éileamh seanchaite: múnla nua, tiomsaitheoir athraithe, dáileadh sonraí nua, riail lipéid athbhreithnithe, athsholáthar crua-earraí, athrú beartais nó comhartha raonta breathnaithe. Is píosa beag cuimhne institiúidí é riail éaga.
Gan riail éaga, carnann uimhreacha ar nós cótaí ar chathaoir. Tá gach ceann acu fós ann go teicniúil, agus níl a fhios ag éinne cé acu ceann a bhaineann le lá an lae inniu. Is féidir le clár torthaí an stair iomlán a choinneáil agus an chomparáid reatha, an sainmhíniú a cuireadh in ionad, agus an chúis leis an athrith, á gcur in iúl. Is gnáthchothabháil ansin an gníomh athrithe seachas freagairt ar ghéarchéim. Tá sé seo thar a bheith tábhachtach do sheirbhísí poiblí, áit a bhféadfadh toradh maireachtáil níos faide ná an fhoireann a tháirg é.
Cosnaíonn éag an dul chun cinn macánta freisin. Má nochtann ualach oibre nua go raibh tagarmharc níos luaithe róchúng, féadfaidh an eagraíocht an t-athrú a fhoilsiú, an tseanmhodh a chaomhnú agus an teorainn nua a mhíniú. Ní gá di uimhir atá as dáta a chosaint ná a ligean air nár ann don tseanuimhir riamh. Tá tagarmharc is féidir a chúngú, a chur in ionad agus a thuiscint níos úsáidí ná ceann nach mór fanacht iontach go deo.
Foinsí
- Creat chun ionstraimí meastóireachta ar fheidhmíocht AI a thréithriú, OECD, AI and the Future of Skills, Imleabhar 2. Chuathas i gcomhairle le creat 18-ghné an chaibidil, lena n-áirítear clúdach, cuspóir, réadúlacht, bailíocht, iontaofacht agus trédhearcacht.
- Creat a thógáil chun cumais AI a thomhas, OECD, AI and the Future of Skills. Chuathas i gcomhairle le creat tomhais cúramach, fianaise-bhunaithe an chaibidil agus le teorainneacha chlúdach reatha na dtagarmharc.
- Cód Cleachtais Staidrimh na hEorpa, Eurostat. Chuathas i gcomhairle leis na 16 phrionsabal agus na 84 tháscaire do Chóras Staidrimh na hEorpa.
- Creat um Dhearbhú Cáilíochta, Eurostat. Chuathas i gcomhairle le modhanna, uirlisí agus ról dea-chleachtais an chreata maidir le cur i bhfeidhm an Chóid Chleachtais.
- Beartas cáilíochta Eurostat, Eurostat. Chuathas i gcomhairle leis na ceithre leibhéal dearbhaithe cáilíochta agus le ról na dtuarascálacha cáilíochta agus meiteashonraí.
- Treoir aighneachta MLPerf Inference, MLCommons. Chuathas i gcomhairle le cineálacha córas, cásanna, rannáin, seiceáil cruinnis agus céimeanna aighneachta.
- Doiciméadú tagarmharc MLPerf Inference, MLCommons. Chuathas i gcomhairle leis na réimsí tagarmhairc foilsithe agus na samplaí, lena n-áirítear coinníollacha tacair sonraí, cáilíochta agus folaigh.
- Grúpa oibre MLPerf Inference, MLCommons. Chuathas i gcomhairle le cuspóir tagarmharcanna ionraice ionadaíocha agus an dúshlán atáirgtheachta trasna crua-earraí agus bogearraí.
- Rialachán (AE) 2024/1689, an tAcht um Intleacht Shaorga, EUR-Lex. Chuathas i gcomhairle le hAirteagal 15 maidir le cruinneas, láidreacht, cibearshlándáil agus comhsheasmhacht saolré.
- Dweve Core, Dweve. Tacaíonn na sainmhínithe poiblí ar chill forghníomhaithe agus ar chonradh cinntitheachta leis an nóta Dweve gairid, nochtaithe amháin.