Politika usmerjanja modelov

Usmerjevalnik modelov je tehničen, ker izbira končne točke. V praksi odloča, kam smejo teči znanje, denar, pristojnost, tveganje in institucionalna odvisnost.

Politika usmerjanja modelov

Majhno stikalo, ki ga nihče ni dal na dnevni red

Sestanek o nabavi je bil o asistentu z umetno inteligenco za veliko storitveno organizacijo. Dnevni red je imel običajne resne samostalnike: kakovost, zasebnost, stroške, uvajanje, skladnost, načrt. Predstavitev je tekla gladko. Uporabnik je zastavil vprašanje, odgovor se je prikazal, viri so bili navedeni, vmesnik pa je bil videti dovolj umirjen, da je šel skozi več odborov. Nato je inženir omenil, da bodo zahteve potekale prek usmerjevalnika modelov. Preprosto, je rekel. Usmerjevalnik bo za vsako nalogo izbral najboljši razpoložljivi model.

Preprosto je pogosto točka, kjer politika vstopi v flisastem brezrokavniku. Prostor je slišal optimizacijski problem. Usmerjevalnik bi uravnotežil stroške, hitrost, zmogljivost, razpoložljivost in morda občutljivost podatkov. Slišalo se je tehnično. Slišalo se je tudi priročno, kar je zvok, ki ga oddaja marsikatera vrzel v upravljanju, preden dobi proračun. Šele pozneje je nekdo vprašal, kaj pomeni najboljši. Najcenejši. Najhitrejši. Najbolj natančen na angleškem merilu uspešnosti. Najbolj razpoložljiv v delovnem času v Evropi. Najbolj obvladljiv. Najbolj pregleden. Najmanj odvisen od enega samega dobavitelja. Najmanj verjeten, da bi zaupne gradivo poslal čez mejo, ki je nihče ni znal pojasniti.

Usmerjevalnik ni bil manjši sestavni del. Bil je točka, kjer je institucionalna politika postala obnašanje v realnem času. Skozenj bi šla vsaka zahteva. Odločal bi, ali lokalni model obravnava klasifikacijo, ali oddaljeni model pripravi osnutek odgovora, ali specialistični model vidi pravno besedilo, ali splošni model prejme kontekst stranke, ali rezervna pot prečka regije, ali je za delo z nizkim tveganjem dovoljen cenejši končni vmesnik in ali se primer z velikim vplivom upočasni zaradi dokazov. Usmerjevalnik je bil površina upravljanja z API-jem.

To je politika usmerjanja modelov. Ne strankarska politika, ne govori, ne dramatične zastave v strateškem dokumentu. Tišja politika tega, kateri kompromisi so kodirani kot privzete nastavitve. Pravilo usmerjanja lahko porabi javni denar v tujini ali ohrani zmogljivost lokalno. Lahko ohrani lokalnost podatkov ali jo erodira primer za primerom. Lahko naredi dobavitelja nepogrešljivega ali ohrani možnosti za izhod. Lahko ceni pojasnljivost bolj kot zakasnitev ali zakasnitev bolj kot možnost pritožbe. Lahko spremeni suverenost v operativno omejitev ali v odstavek v nabavnem besedilu.

Odločitve o usmerjanju so odločitve o lokalnosti. Določajo, kje poteka delo in katera institucija ga lahko pozneje še pojasni.

Usmerjanje ni nevtralna napeljava

Razumljiva je skušnjava, da bi usmerjanje obravnavali kot vodovodno napeljavo. Zahteva prispe. Sistem razvrsti nalogo. Izbere model. Odgovor se vrne. Če je odgovor dober in račun nižji, vsi čestitajo vodovodni napeljavi. Toda vodovodna napeljava nosi moč. Vodovodna cev odloča, katera soseska dobi pritisk. Usmerjevalnik modelov odloča, katera zmogljivost dobi delo. Dejstvo, da je odločitev avtomatizirana, je ne naredi nevtralne. Le pogovor o politiki postane manj tekoč.

Usmerjevalnik vsebuje teorijo vrednosti. Če modele razvršča predvsem po ceni, je organizacija za prevladujočo vrednost izbrala strošek. Če jih razvršča po rezultatih meril, je izbrala ozko opredelitev usposobljenosti. Če jih razvršča po zakasnitvi, je izbrala hitrost. Če pred ocenjevanjem zmogljivosti filtrira po jurisdikciji, revizijski sledljivosti, pogodbenih pravicah, preglednosti izvora ali minimizaciji podatkov, je izbrala nadzor. Nobena od teh izbir ni samodejno napačna. Težava je v tem, da se pretvarjamo, da to niso izbire.

Usmerjanje tudi porazdeljuje učenje. Model, ki prejema promet, prejema operativne primere, poročila o napakah, pozornost pri vrednotenju, prizadevanja za integracijo in utemeljitve proračuna. Model, ki redko prejema promet, je sčasoma videti slabši, ker je manj prilagojen delu organizacije. Tako lahko usmerjevalnik ustvari prihodnost, za katero trdi, da jo le meri. Če se lokalni ali odprti model vedno uporablja le za trivialne naloge, si nikoli ne bo zgradil podatkovne podlage, potrebne za resne naloge. Če oddaljeni splošni model dobi vsak težji primer, postane odvisnost samoizpolnjujoča se metrika.

Enak učinek se pojavi v ekipah. Če je politika usmerjanja skrita v prodajalčevem portalu ali v majhni skupini za platformo, lastniki področij izgubijo pregled nad tem, zakaj njihovo delo poteka tja, kamor poteka. Pravna služba vidi pregled zasebnosti. Finance vidijo stroškovno postavko. Operativa vidi kakovost odzivov. Varnost vidi dnevnike dostopa. Nabava vidi pogodbene klavzule. Usmerjevalnik vidi celotno odločitev. Kdor upravlja usmerjevalnik, upravlja kompromis med temi perspektivami. To ni vodovodna napeljava. To je institucionalna arbitraža z nižjo zakasnitvijo.

Beseda najboljši potrebuje priče

Najboljši je premajhna beseda za usmerjanje modelov. Model je lahko najboljši za prevajanje, najslabši za ravnanje s poverljivimi viri, ustrezen za povzemanje, slab za strukturirano izločanje, odličen za hitrost, drag za obseg, šibek za sledljivost in politično neroden za javni organ, ki mora pojasniti, kam so šli podatki državljanov. Enotna razvrstitev skriva dejstvo, da je zmogljivost večdimenzionalna. Prav tako skriva dejstvo, da vsaka dimenzija pri posamezni nalogi pomeni nekaj drugega.

Pomočnik za pregled pogodb bi se moral usmerjati drugače kot pozdrav v službi za pomoč uporabnikom. Orodje za podporo pri medicinski triaži bi se moralo usmerjati drugače kot povzetek sestanka. Mestni klepetalni robot, ki odgovarja na vprašanja o uradnih urah, bi se moral usmerjati drugače kot sistem, ki pripravlja osnutke uradnih opominov. Naloga, podatki, pravna podlaga, reverzibilnost, človeški pregled in prizadeta oseba vsi spremenijo pot. Obravnavanje iste politike usmerjanja kot ustrezne za vse delo ni učinkovitost. To je udobje, preoblečeno v diagram sistema.

Beseda najboljši zato potrebuje priče. Odločitev o usmerjanju bi morala biti sposobna pokazati, katere omejitve so bile uporabljene pred izbiro modela. Pokazati bi morala, zakaj so bili nekateri modeli upravičeni, zakaj so bili drugi blokirani, kateri dokazi so podprli izbiro in katera rezervna možnost bi bila uporabljena, če izbrana pot ne bi uspela. Če je strošek prevladal nad lokalnostjo, to povejte. Če je lokalnost prevladala nad zmogljivostjo, to povejte. Če je primer z velikim vplivom zahteval pregleden model namesto najhitrejšega modela, to povejte. Skriti kompromisi s tem, da so skriti, ne postanejo manj politični. Postanejo manj odgovorni.

V armaturnih ploščah, ki uspešnost usmerjanja prikazujejo kot en sam skupni rezultat, se skriva drobna krutost. Povprečna kakovost odgovorov je višja. Povprečni stroški so nižji. Povprečna zakasnitev je v redu. Medtem lahko občutljivi primeri prečkajo mejo, strokovno delo je lahko usmerjeno k modelu, ki ne more zagotoviti zanesljivih dokazov, rezervna pot pa lahko tiho pošilja zahteve v regijo, ki je nihče ni odobril. Povprečja so prijazna na enak način, kot je naprava za meglo atmosferska. Resno upravljanje ne bi smelo živeti tam.

Vprašanje usmerjanja pogosto ni, kateri model zmaga. Je, ali naloga potrebuje model, pravilo, specialista ali človeka.

Usmerjanje po stroških ima dolg rep

Usmerjanje po stroških je privlačno, ker hitro prinese vidne prihranke. Preproste naloge pošljite cenejšim modelom. Drage modele uporabite le, kadar je to potrebno. Predpomnite ponavljajoče se odgovore. Uporabite rezervno pot, ko ponudnik upočasni delovanje. Nič od tega ni nespametno. Pravzaprav je zavračanje stroškovne discipline svojevrstna oblika neodgovornosti. Napaka je, če kratkoročni strošek na enoto postane edina resna številka v politiki usmerjanja.

Dolg rep se začne pri vrednotenju. Poceni pot, ki poveča obseg pregledovanja, je lahko videti poceni le zato, ker breme pregledovanja leži v drugem oddelku. Hiter model, ki ustvarja nekoliko bolj verjetne napake, lahko poveča stroške popravkov, obravnavo pritožb, prizadevanja za revizijo ali poklicno izčrpanost. Rezervna pot, ki se izogne izpadu s prečkanjem regije, lahko pozneje ustvari pravno delo. Model, ki je danes poceni, lahko postane drag, ko organizacija okoli njega zgradi pozive, vrednotenja, prilagajanje, spremljanje in navade operaterjev. Odvisnost se ima navado predstaviti po uvodnem popustu.

Usmerjanje po stroških oblikuje tudi trg. Velike organizacije niso pasivni kupci. Njihov promet oblikuje prioritete ponudnikov in financira določene ekosisteme. Če resno institucionalno delo vedno poteka prek majhnega števila zunanjih končnih točk, lokalna zmogljivost slabi. Če so naloge z nizkim tveganjem, a velikim obsegom, rezervirane za lokalne modele, ti modeli pridobijo operativne dokaze in ekonomski kisik. To ne pomeni, da mora vsaka organizacija subvencionirati tehnologijo, ki je ne potrebuje. Pomeni, da je politika usmerjanja eno od mest, kjer nakupne odločitve postanejo industrijske odločitve.

Obstaja tudi operativna različica tega. Če ekipa nikoli ne vidi, kaj je usmerjevalnik naredil, se ne more naučiti, kje zadostujejo manjši modeli. Ne more prepoznati nalog, ki bi morale postati deterministični delovni tokovi. Ne more najti točke, kjer bi boljši podatki omogočili cenejše usmerjanje. Usmerjevalnik postane črna škatla, ki prihrani denar na centralni ravni, medtem ko kompetenco naredi lokalno le po naključju. To je slab posel. Dober usmerjevalnik bi moral stroške narediti dovolj vidne, da lahko ekipe izboljšajo delo, ne le račun.

Lokalnost je praktična omejitev, ne razpoloženje

O lokalnosti podatkov se pogosto govori z napihnjenim jezikom, kot da bi bila vsaka odločitev o usmerjanju referendum o civilizaciji. To ni v pomoč in, kar je pomembneje, je dolgočasno. Lokalnost je praktična omejitev. Kam se premikajo podatki. Kje se obdelujejo. Kje so shranjeni dnevniki. Kateri zakoni veljajo. Katero osebje lahko pregleda sled. Kateri dobavitelj lahko vidi izpeljano gradivo. Katero zahtevo za izbris ali popravek je mogoče izpolniti. Kateri sistem še naprej deluje, če je pot blokirana. Ta vprašanja odločajo, ali organizacija obvladuje svoje delo pod pritiskom.

Nekatera dela lahko varno zapustijo organizacijo. Nekatera dela ne bi smela. Nekatera dela lahko zapustijo organizacijo po redakciji. Nekatera dela lahko zapustijo organizacijo le po političnem prehodu. Nekatera dela bi morala potekati lokalno, ker so podatki občutljivi, je zakasnitev pomembna, je model dovolj dober ali pa morajo biti dokazi pod neposrednim nadzorom. Nekatera dela bi morala potekati na daljavo, ker naloga resnično potrebuje zmogljivost, ki ni na voljo lokalno. Bistvo ni čistost. Bistvo je premišljena namestitev s potrdilom.

Lokalnost vključuje tudi dokaze. Ni dovolj vedeti, da je odgovor prišel. Organizacija mora vedeti, katera pot je bila izbrana, katere omejitve so bile preverjene, kateri delčki vira so bili poslani, katera različica modela je odgovorila, katera rezerva je bila na voljo in ali so bili kakšni izpeljani podatki shranjeni. Če je sled vidna le prek nadzorne plošče dobavitelja, lahko organizacija med incidentom ugotovi, da je njena odgovornost odvisna od podpore. Podpora ni strategija suverenosti, tudi če je številka zahtevka zelo pomirjujoča.

Dobra politika lokalnosti naredi varno pot cenejšo za uporabo. Če so redakcija, lokalno pridobivanje, preverjanja politik in zajem dokazov mučni, bodo ekipe iskale bližnjice. Če lahko usmerjevalnik te nadzore uporabi samodejno, ekipam ni treba postati amaterski strokovnjaki za jurisdikcijo pred kosilom. Praktična zmaga ni ideološka čistoča. Gre za zmanjšanje trenja pri izvajanju nadzorovanega dejanja.

Merila uspešnosti niso zapovedi

Usmerjanje modelov pogosto črpa samozavest iz meril uspešnosti. Ta model dosega višje rezultate pri razmišljanju. Tisti je boljši pri kodiranju. Drugi je cenejši za dolg kontekst. Merila uspešnosti so uporabna, vendar niso zapovedi. Redko predstavljajo dejanske dokumente organizacije, mešanico jezikov, politične omejitve, toleranco do napak, vzorec človeškega pregleda ali pravno mejo. Merilo uspešnosti vam lahko pove, da je model na splošno močan. Ne more vam povedati, da bi moral videti določeno datoteko državljana ob 14:07 v četrtek pod začasno izjemo od politike.

Vrednotenje nalog mora zato biti znotraj zanke usmerjanja. Kateri model je na vaših obrazcih ustvaril pravilne strukturirane izpise. Kateri model je imel manj halucinacij na vašem arhivu politik. Kateri model je ohranil nizozemske nianse v besedilih pritožb. Kateri model je obravnaval stare skenirane dokumente. Kateri model je varno odpovedal, ko so bili viri v nasprotju. Kateri model je dal boljše odgovore po pridobivanju. Kateri model je povečal človeške posege. Kateri model je zmanjšal predelavo. Pravilen odgovor se lahko spremeni po četrtletju, kakovosti vira, politiki in kadru.

Usmerjanje mora prepoznati tudi reševalnike, ki niso modeli. Nekatere naloge sodijo med pravila, poizvedbe v podatkovnih bazah, iskanje, reševalnike omejitev, predloge ali človeške delovne mize. Pošiljati deterministično delo generativnemu modelu samo zato, ker je usmerjevalnik že tam, je kot poklicati taksi, da prečkate pisarno. Morda pride, a narobe ste razumeli stavbo. Usmerjevalniku bi moralo biti dovoljeno reči, da model ni potreben. To ni neuspeh uvajanja umetne inteligence. To je začetek zdrave arhitekture.

Meja ni matematična vaja sama po sebi. Je prostor, kjer institucija pove, kateri kompromisi so dovoljeni.

Skrita ustava usmerjevalnika

Vsak usmerjevalnik potrebuje ustavo, tudi če se dokument tako ne imenuje, ker organizacije postanejo nervozne, kadar programska oprema zveni kot država. Ustava določa, katera pravila so trde omejitve in katera so preference. Občutljivi osebni podatki ne smejo nikoli zapustiti določene meje. Odločitve z velikim vplivom lahko zahtevajo pregledne poti. Tveganja z nizkim tveganjem se lahko optimizirajo za stroške. Rezervne poti lahko zmanjšajo zmogljivost, ne pa zasebnosti. Nujna pravila lahko potečejo. Ljudje lahko preglasijo usmerjanje le z zabeleženim razlogom.

To ustavo bi morali znati brati politika, inženiring, operacije, nabava, pravna služba, varnost in revizija. To ne pomeni, da vsak bere kodo. Pomeni, da imajo pravila usmerjanja razumljivo politično plast in preverljivo tehnično plast. Pravilo, ki ga pravna služba razume, inženiring pa ga ne more preizkusiti, je gledališče. Pravilo, ki ga inženiring lahko preizkusi, politika pa ga ne more razumeti, je zasebna vlada. Nobeno ni videti dobro, čeprav ima drugo pogosto lepši YAML.

Ustava bi morala opredeliti tudi spremembe. Kdo lahko doda model. Kdo ga lahko odstrani. Kdo lahko spremeni uteži. Kdo odobri novo rezervno pot. Kakšni dokazi so potrebni, preden cenejši model dobi več prometa. Kaj se zgodi, ko dobavitelj spremeni pogoje, različico modela, prakso hrambe ali regijo. Katere metrike sprožijo pregled. Kateri incidenti začasno ustavijo pot. Brez pravil o spremembah politika usmerjanja zdrsne skozi vrsto majhnih praktičnih odločitev, dokler se nihče več ne spomni, kdaj se je ustava premaknila.

Tu je tudi človeška politika. Ekipe bodo lobirale za poti, ki olajšajo njihovo delo. Finance bodo imele rade poceni poti. Varnost bo imela rada zaprte poti. Uporabniki bodo imeli radi hitre poti. Strokovnjaki na področju bodo imeli radi zmogljive poti. Nabava bo imela rada poti, ki ustrezajo pogodbam. Vodstvo bo imelo rado poti, ki ohranjajo odprte možnosti, ne da bi vidno stale več. Ti interesi so legitimni. Usmerjevalnik je prostor, kjer jih je treba izrecno uskladiti, namesto da se jih pretihotapi v privzeto nastavitev, imenovano uravnoteženo.

Rezervna pot je kraj, kjer se načela preizkušajo

Upravljanje usmerjanja je preprosto, ko vse deluje. Težji trenutek je izpad, preobremenitev, pritisk na proračun ali javna pozornost. Oddaljeni ponudnik se upočasni. Lokalni model ne opravi preizkusa izdaje. Končna točka z visoko zmogljivostjo postane nedosegljiva. Nova politika omeji regijo. Dobavitelj spremeni pogoje hrambe. Organizacija ima še vedno delo. Pravila za preusmeritev odločajo, ali načela preživijo nevšečnosti.

Resna politika preusmeritve določa, kaj se lahko poslabša in kaj se ne sme. Zakasnitev se lahko poslabša. Zmogljivost se lahko poslabša pri opravilih z nizkim tveganjem. Nekatera nujna opravila lahko čakajo v čakalni vrsti. Nekatera opravila se lahko vrnejo na predloge ali pravila. Nekatere poti z velikim vplivom se lahko ustavijo, namesto da bi prestopile mejo. Nekatere izredne izjeme lahko zahtevajo odobritev osebe in potečejo po določenem času. Usmerjevalnik teh izbir ne bi smel odkriti med izpadom. Tako začnejo institucije pisati upravljanje v klepetu o incidentih, literarni zvrsti z omejenim dostojanstvom.

Preusmeritev potrebuje tudi dokaze. Če je zahteva šla po izredni poti, naj to zapis pove. Če so bili podatki drugače prečiščeni, naj to pove. Če je bil uporabljen model z nižjo zmogljivostjo, naj to pove. Če je morala oseba pregledati, ker običajna pot ni bila na voljo, naj to pove. Poznejše vrednotenje mora ločiti običajno delovanje od delovanja preusmeritve. Sicer začasni kompromis postane neviden, nato običajen, nato pa ga nekdo, ki ni bil na klicu o incidentu, zagovarja kot tradicijo.

To je eden od razlogov, zakaj usmerjanje sodi v upravljanje, ne le v platformno inženirstvo. Inženirji lahko zgradijo mehanizem. Institucija mora odločiti, kaj je dovoljeno pod pritiskom. Usmerjevalnik, ki vedno ohranja delovanje storitve, je lahko videti odporen. Če ohranja delovanje tako, da ignorira meje, ni odporen. Je samo pripravljen.

Odločitvena zanka, ne čarobno stikalo

Najbolj zdravi sistemi usmerjanja delujejo kot odločitvene zanke. Opazujejo vrsto zahteve, občutljivost podatkov, kakovost vira, delovanje modela, povratne informacije uporabnikov, stroške, zakasnitev, izjeme in incidente. Razlagajo, ali trenutna pot še ustreza opravilu. Odločajo, ali spremeniti uteži, omejitve, modele, pozive, pripravo podatkov ali človeški pregled. Zapišejo, zakaj je prišlo do spremembe. Preizkusijo, ali so se izidi izboljšali. Organizacijo naučijo, kaj se je dogajalo.

Ta zanka je pomembna, ker se svet ne ustavi za usmerjevalnik. Modeli se spreminjajo. Cene se spreminjajo. Predpisi se spreminjajo. Pogodbe se spreminjajo. Podatki se spreminjajo. Uporabniki spremenijo svoje vedenje, ko asistent postane običajen. Opravila, ki so bila eksperimentalna, postanejo osrednja. Opravila, ki so bila videti preprosta, razkrijejo izjeme. Usmerjevalnik, zamrznjen ob zagonu, ni upravljanje. Je fosil z dostopom do omrežja.

V zanko naj bodo vključeni ljudje, ki so blizu delu. Vedo, kdaj je odgovor modela tehnično pravilen, a operativno neuporaben. Vedo, kdaj hitrejši odgovor poveča število nadaljnjih klicev. Vedo, kdaj je lokalni model dovolj dober, če so vhodi najprej očiščeni. Vedo, kdaj je oddaljeni specialist upravičen. Usmerjanje, ki ignorira povratne informacije iz domene, bo optimiziralo vidne številke in se nato pretvarjalo, da je presenečeno, ko se pravo delo ne strinja.

Usmerjevalnik bi morali upravljati kot živi nadzorni sistem. Sicer današnji kompromis postane jutrišnja arhitektura.

Neprijetna vprašanja kupca

Vsaka organizacija, ki kupuje ali gradi usmerjevalno plast, bi si morala neprijetna vprašanja zastaviti zgodaj. Ali lahko vidimo politiko usmerjanja v obliki, ki jo razumejo naše ekipe za upravljanje. Ali jo lahko preizkusimo. Ali lahko dokažemo, katera pot je bila uporabljena za posamezen primer. Ali lahko izključimo modele glede na razred podatkov, jurisdikcijo, nalogo, vpliv ali zahtevo po dokazih. Ali lahko za vrednotenje vsilimo pot. Ali lahko primerjamo skrite stroške, ne le stroške žetonov. Ali lahko hranimo zapise, ko se dobavitelj spremeni. Ali lahko odidemo, ne da bi izgubili zgodovino usmerjanja.

Ta vprašanja niso proti inovacijam. Tako resne institucije preprečujejo, da bi izbira modela postala tabla razpoloženja. Prilagodljiv usmerjevalnik brez upravljanja se lahko hitro premakne na mesta, ki jih nihče ni odobril. Tog usmerjevalnik brez učenja lahko zamrzne slabe odločitve. Cilj ni ne kaos ne cement. Cilj je usmerjevalna plast, ki se lahko prilagaja v okviru pravil, in pravila, ki jih je mogoče izpodbijati z dokazi.

Prav tako se je vredno vprašati, komu koristi nepreglednost. Če usmerjevalnika ni mogoče preveriti, lahko organizaciji sporočijo, da je bil izbran najboljši model, ne da bi lahko videla, katere vrednosti so bile uporabljene. To je lahko sprejemljivo za preprosto aplikacijo. Ni sprejemljivo za delo, ki vključuje občutljive podatke, javne naloge, regulirane odločitve, strokovno presojo ali strateško odvisnost. Zaupajte mi, usmerjevalnik ve, ni model upravljanja. To je stavek, ob katerem bi morala nabavna ekipa poseči po še enem piškotu.

Nauk

Usmerjanje modelov je politično, ker institucionalne prioritete spreminja v odločitve v realnem času. Odloča, kam gredo podatki, kateri modeli dobijo delo, kateri dobavitelji pridobijo odvisnost, katere zmogljivosti dozorijo, katera tveganja so sprejeta, kateri dokazi so ohranjeni in katere rezervne možnosti so dovoljene pod pritiskom. Tehnični mehanizem je lahko klasifikator, pravilo, funkcija točkovanja ali potek dela. Posledice so organizacijske.

Dobro usmerjanje se začne s priznanjem, da je najboljše v množini. Najboljše za stroške ni vedno najboljše za nadzor. Najboljše za zmogljivost ni vedno najboljše za lokalnost. Najboljše za zakasnitev ni vedno najboljše za revizijo. Najboljše za danes ni vedno najboljše za izhodno vrednost. Zrelo usmerjanje najprej uporabi stroge omejitve, lokalno oceni ustreznost, zabeleži pot, pregleda rezultate in spreminja politiko na podlagi dokazov. Vključuje pravila, modele, ljudi in včasih modro odločitev, da modela sploh ne uporabimo.

Politika ne izgine, če je usmerjevalnik skrit. Preprosto se preseli v privzete nastavitve, nastavitve dobavitelja in nedokumentirane kompromise. Bolje jo je pripeljati na dan. Usmerjevalnik modelov bi moral biti zemljevid dovoljenega institucionalnega gibanja, ne čarobno stikalo med končnimi točkami. Ko organizacija to razume, usmerjanje preneha biti tehnična opomba in postane to, kar je vedno bilo: nadzorna ravnina suverenosti.