Verke toimetus
Kas AI võib halba nõu hallutsineerida? Jah — siin on, kuidas seda ära tunda ja sellega toime tulla
Verke toimetus ·
Kas AI võib halba nõu hallutsineerida? Jah. Suured keelemudelid leiutavad aeg-ajalt asju, mis kõlavad usutavalt — uuringu, mida pole olemas, vale viite, nõuande, mis sinu olukorda ei sobi, enesekindlalt kõlava raamistiku, mis on tegelikult välja mõeldud. Coaching on madalama panusega kontekst kui meditsiiniline või juriidiline, aga halb nõu loeb ikkagi. Aus versioon sellest artiklist on, et turvapiirded vähendavad hallutsinatsiooni, kuid ei kõrvalda seda, ja kasutaja enda kalibreerimine on osa sellest, kuidas hästi töötav AI coaching tööriist kasulikuks jääb.
Artikkel käib läbi, kus hallutsinatsioon avaldub, kuidas Verke on disainitud kõrge riskiga kategooriaid kinni püüdma ja kuidas kalibreerida oma usaldust kasutajana — mis on umbes „suhtu AI soovitustesse nagu nõuandesse targalt sõbralt, kes pole kõiketeadev." Verke hoiak on eelistada „ma pole kindel" enesekindlalt-aga-valele ja hoida coaching suunatud uurimisele, mitte diagnoosimisele. Miski sellest ei muuda hallutsineerimist võimatuks. See teeb aga ebaõnnestumised äratuntavaks ja taastumise sammud lihtsaks.
Mida „hallutsineerimine" tähendab
Kuidas keelemudelid välja mõtlevad
Keelemudel ennustab tõenäolist järgmist teksti oma treeningandmete mustritest. Enamasti on kõige tõenäolisem järgmine tekst ka õige järgmine tekst — just seetõttu need tööriistad nii hästi toimivadki. Mõnikord on aga kõige tõenäolisem järgmine tekst vale. Mudel toodab enesekindlalt kõlava vastuse, millel pole faktilist alust. Just sujuvus ajab inimesi segadusse: vale vastus loeb sama ladusalt kui õige, sest mudeli ülesanne on sujuv tekst, mitte kontrollitud tekst.
See pole valetamine — mudelil pole agendat, eesmärki ega kavatsust petta. See on lihtsalt see, et mudelil pole eraldi „tõe" komponenti, mis enne vastuse tootmist seda päris maailma vastu kontrolliks. Uuemad tehnikad (otsing, tööriistade kasutus, sisemise sidususe kontrollid, keeldumise treenimine) vähendavad hallutsineerimist märkimisväärselt ja määr langeb iga mudeli põlvkonnaga. Kuid nad ei kõrvalda seda. AI väljundi käsitlemine kui „enamasti õige, aga kontrolli kõrge panusega osad üle" on täna ja tõenäoliselt veel mitu aastat õige kalibreering.
Kahtled, kas usaldada nõu, mida saad?
Proovi Judithiga üks KKT harjutus — 2 minutit, e-posti pole vaja.
Vestle Judithiga →Kus hallutsineerimine coachingus avaldub
Väljamõeldud viited
Klassikaline hallutsinatsiooni kuju: „2019. aasta Harvardi uuring leidis, et…" millele järgneb enesekindlalt kõlav leid, mida üles otsides olemas pole. Artikkel on välja mõeldud; autorid on välja mõeldud; ajakirja nimi võib olla päris, aga artikkel pole. Lahendus on kontrollida iga sulle olulist viidet PubMedi või Google Scholari kaudu enne, kui sellele toetud. Kui URL on lisatud, kliki läbi ja kontrolli, et abstrakt päriselt ütleks seda, mida väideti — vahel on URL päris, aga sellele lisatud kokkuvõte on vale.
Konkreetsed meditsiinilised või juriidilised nõuanded
Doosid, ravimite koostoimed, kohalikud regulatsioonid, konkreetsed juriidilised protseduurid — kõik, kus vastus peab olema täpselt õige või tekitab kahju. Isegi kui mudeli vastus juhtub olema õige, on see nendele küsimustele vale tööriist, sest sul pole võimalik teada, kas see seekord õige oli. Kontrolli alati litsentseeritud spetsialistiga (arst, apteeker, jurist, raamatupidaja) kõik, mille põhjal nendes valdkondades tegutsed. Verke coachid on disainitud need küsimused otse tagasi lükkama, mitte improviseerima — vt järgmist osa.
Enesekindlad vastused kitsastes valdkondades
Haruldased seisundid hõreda treeninguandmestikuga, kohalikud regulatsioonid, mis enamikku maailma ei huvita, konkreetsed terapeudid nime pidi, väikesed erialased kogukonnad. Mudelil on treeningandmetes parasjagu nii palju mustrit, et toota midagi sujuvat, aga mitte piisavalt, et teada, kas see on õige. Sujuvuse ja kitsuse kombinatsioon on peamine signaal — kui teema on hämar, aga vastus on enesekindel, siis on aeg kalibreerimine sisse lülitada.
Usutavad, aga valed raamistikud
Väljamõeldud „viieastmelised meetodid" ja „neli sammast…", mida kirjanduses olemas pole. Mudel on näinud piisavalt eneseabi stiilis struktuuri, et toota sellest veenva välimusega versioone, isegi kui kirjeldatav konkreetne raamistik on välja mõeldud. Kui raamistik on sinu otsuse seisukohast oluline, otsi autori või meetodi nimi üles ja veendu, et see on päriselt olemas, enne kui käsitled seda tavapraktikana. Päriselt olemas olevatel raamistikel on päris Wikipedia leheküljed, raamatud ja viited; väljamõeldutel pole.
Mida me selle vastu teeme
Mida Verke selle vastu teeb
Valdkondlikud turvapiirded
Coachid on disainitud kõrge riskiga kategooriaid pigem tagasi lükkama kui improviseerima. Ravimite doosid, ravimite koostoimed, juriidilised arvamused, diagnostilised väited, kõik, mis läheb litsentseeritud spetsialisti territooriumile — vastus on suunata mujale, mitte üritada. „See kõlab nagu küsimus apteekrile" on funktsioon, mitte puudus. Toode jätab pigem vastamata kui vastab valesti.
Viitedistsipliin
Kui coach viitab uuringule või meetodile, sisaldab viide päris URL-i, mida kasutaja saab kontrollida (selle saidi StopOverthinking artikkel viitab A-Tjak et al. 2015 PubMedi lingiga just sellepärast — lugejad peaksid saama läbi klikkida ja üle kontrollida). Kui coach ei saa midagi kontrollitavalt viidata, nihkub sõnastus „on tõendeid, et" või „see on valdkonnas tavaline muster" suunas, mitte väljamõeldud üksikasjadesse. Lävi on „lugeja saaks selle 30 sekundiga üle kontrollida."
Konservatiivsed vaikeseaded
Kui vestluses vihjatakse tõsidusele, on vaikimisi käik tuua esile kliiniline abi, mitte improviseerida abi. Kriisi-lähedased teemad suunatakse kriisiressursside juurde. Diagnostilise-lähedased teemad suunatakse kliinilise spetsialisti juurde. Toode on disainitud kalduma poole „palun too see inimese juurde", kui panus on kõrge — sest just seal teeks hallutsineerimine kõige rohkem kahju, kui see ikkagi läbi lipsaks.
Mida sina kasutajana teha saad
Kalibreerimine on jagatud töö. Toode kannab oma osa turvapiirete ja viitedistsipliiniga; kasutaja osa on paar lihtsat harjumust, mis muudavad hallutsinatsiooni juhtumise korral palju vähem kulukaks:
- Suhtu AI soovitustesse nagu nõuandesse targalt sõbralt, kes pole kõiketeadev. Kasulik lähtepunkt, mitte viimane sõna.
- Kontrolli viited enne nende jagamist või nende põhjal tegutsemist. PubMed ja Google Scholar on 30-sekundilised kontrollid.
- Küsi „kui kindel sa selles oled?" — mudelid suudavad mõnikord küsimisel oma ebakindlust välja tuua ja vastus on informatiivne.
- Kõige meditsiinilise, juriidilise või rahalise puhul — kontrolli litsentseeritud inimesega. AI on neis valdkondades esmase allikana vale tööriist.
- Kui miski sinu olukorda ei sobi, vaidle vastu. Vastus kalibreerib selle ümber, mille sa juurde lisasid — üldine nõuanne on sageli märk, et coach pole veel täielikult eripärasid mõistnud.
Millal otsida rohkem abi
Eneseabi ja AI-coaching saavad palju ära teha, aga neil on piirid. Kui sul on raske depressioon, mis ei taandu, paanikahood, mis segavad igapäevaelu, enesevigastamise mõtteid, käimasolev traumatöö või sõltuvus — need on märgid, et pöörduda litsentsiga spetsialisti poole, mitte põhjus coaching-tööriistaga veel rohkem pingutada. Soodsamaid võimalusi leiad lehelt opencounseling.com või rahvusvahelisi abitelefone aadressil findahelpline.com. Pole mingit auhinda selle eest, et ootad kauem kui vaja.
Tee Judithiga koostööd
Kalibreerimine — „kas see mõte (või see nõuanne) on tegelikult täpne?" — on KKT tuum. Judithi lähenemine käsitleb uskumusi hüpoteesidena, mida testida, mitte faktidena, mida alla neelata, ja just see hoiak võimaldab sul kasutada mistahes sisendiallikat (kaasa arvatud AI coachi) ilma seda üle usaldamata. Ta on hea ka meta-tasandil: märkab, kui sa toetud liiga tugevalt ühele allikale — raamatule, podcastile, sõbrale, äpile — ja toob su tagasi enda otsustusvõime juurde kui lõpliku filtrini. Meetodist lähemalt: Kognitiivne käitumisteraapia.
Proovi Judithiga CBT harjutust — kontot pole vaja
Seotud lugemine
KKK
Korduvad küsimused
Miks AI mõnikord asju välja mõtleb?
Suured keelemudelid ennustavad tõenäolist teksti, mitte kontrollitud tõde. Nad täidavad usutavalt kõlavaid tühikuid siis, kui neil pole põhjendatud infot — enesekindlalt kõlav vastus, millel puudub tegelik alus. See pole valetamine (mudelil pole agendat); see on lihtsalt see, et mudelil pole eraldi „tõe" komponenti, mille vastu end kontrollida. Uuemad turvapiirded vähendavad seda, aga ei kõrvalda.
Kas hallutsineerimine on coachingus ohtlik?
Tavaliselt madal panus, kui teema on refleksiivne — tunnete nimetamine, mustrite uurimine, vestluste harjutamine. Kõrgem panus, kui teema puudutab meditsiinilisi, juriidilisi või finantsilisi üksikasju, kus vale vastus tähendab valet tegevust. Sobita oma kontrollimise hulk panusega: tunne kolleegi vastu ei vaja faktikontrolli; väide ravimi koostoime kohta vajab.
Kuidas ma aru saan, millal AI midagi välja mõtleb?
Enesekindlad vastused kitsastes valdkondades on suurim märk — haruldased seisundid, kohalikud regulatsioonid, konkreetsed terapeudid nime pidi. Viited, mida sa kontrollida ei saa, „uuringud" ilma leitavate URL-ideta ja meditsiinilised üksikasjad ilma hoiatusteta väärivad samuti suuremat kahtlust. Mida puhtam ja viimistletum keel, seda rohkem kontrollimist see väärib; sujuvus pole täpsus.
Kas ma peaksin üle kontrollima, mida AI mulle ütleb?
Kõige tegelikus elus tegutsemist nõudva puhul — jah. Faktide kontrollimine võtab otsingumootoriga 30 sekundit. Refleksiivse vestluse puhul oma kogemuse üle on see vähem oluline, sest tõe allikas oled sina ise. Jaotus on umbes selline: välised väited (numbrid, viited, regulatsioonid) vajavad kontrollimist; sisemine uurimine (mida sa tunned, mida tahad proovida) mitte.
Kas mõned AI coachid on täpsemad kui teised?
Täpsus sõltub aluseks olevast mudelist, sellest, milliste turvapiiretega toode mudeli ümbritseb, ja sellest, kui kitsalt on coach defineeritud. Coachid, mis põhinevad hästi uuritud tõenduspõhistel meetoditel (KKT, ACT, PDT), kalduvad teemast vähem kõrvale kui vabas vormis coachid, sest lähtematerjal on struktureeritud ja hästi kaardistatud. Just sellepärast on Verke coachid meetodi järgi piiritletud.
Verke pakub coachingut, mitte teraapiat ega meditsiinilist abi. Tulemused on inimeseti erinevad. Kui oled kriisis, helista 988 (USA), 116 123 (UK/EU, Samaritans), või kohalik hädaabi. Külasta findahelpline.com rahvusvaheliste ressursside leidmiseks.