Loe esmalt seda
Päris idee—taasloodud ilma näiliste teadusväideteta
Allolev interaktiivne labor taasloob täpselt pimevõrdlust, sundvalikut, kindlushinnangut ja testijärgset avalikustamist. Selle vestlused on toimetuslikud simulatsioonid, mitte reaalajas kontrollitud uuringu salvestised. Sinu tulemus mõõdab, kui hästi sinu oletused kattuvad selle demonstratsiooni varjatud siltidega; see ei tõesta, kas tänapäeva tehisintellekt mõtleb.
Tõendid üle vaadatud ja leht uuendatud August 2026
Interaktiivne eksperiment
Imitatsioonimängu labor
Sina oled küsitleja. Igas voorus kannab üks vastus simulatsiooni varjatud masina silti ning teine inimese silti. Vali masin ja märgi, kui kindel sa oled.
Aus märkus: need on teadlikult kirjutatud õppenäited, mitte päris inimesed ega mõne nimetatud mudeli väljundid. Need näitavad levinud vihjeid—ja seda, miks need vihjed pole usaldusväärsed.
- 1
Loe mõlema osaleja vastust. Võrdle, kuidas A ja B samale viibale vastavad.
- 2
Vali vastus, mis sinu arvates kannab masina silti. Igas paaris on täpselt üks selline vastus.
- 3
Määra kindlus vahemikus 50–100%. Kasuta 50%, kui sisuliselt viskad kulli ja kirja; 100% kasuta ainult siis, kui oled täiesti kindel.
Sinu hindamisaruanne
Tulemus
Mida see sinu kohta ütleb:
Hindasid selle vastuse inimese omaks.
Pidasid inimese sildiga teksti masinlikuks.
Vastusetüüp, mida kõige sagedamini kahtlustasid.
Kui lähedal olid sa „masina moodi käitumisele”?
See test ei mõõda seda. Sa ei vastanud kunagi osaleja A ega B rollis, seega oleks eksitav hinnata sinu enda käitumist inimeselaadseks või masinlikuks. See mõõdab sinu tuvastamisstrateegiat: milliseid kirjutamismustreid seostad masinatega, kui sageli need eeldused töötasid ja kas sinu kindlus vastas sinu täpsusele.
Ära tõlgenda seda tulemust üle. Valim on väike ja teadlikult illustratiivne. Sellel puudub esinduslik valim, valideeritud raskusaste ja reaalajas kohanduv küsitlemine.
Põhimääratlus
Mida Turingi test tegelikult testib
Käitumuslik kriteerium, mitte ajuskaneering
Hindaja ülesanne on epistemiline: Kas ma suudan vestluse põhjal öelda, kumb osaleja on masin? Ekraan eemaldab välimuse, hääle ja mehaanilise ehituse vihjed. Kui masina käitumine muutub protokolli tingimustes inimese käitumisest eristamatuks, õnnestub masinal see imitatsiooniülesanne.
Pimendamine
Hindaja ei tohiks teada osaleja identiteeti ega saada kõrvalkanali vihjeid, nagu trükkimiskiirus, liidese erinevused või metaandmed.
Võrdlus
Inimosalejad on olulised. Nende tuvastamismäär näitab, kui sageli peetakse päris inimesi samades tingimustes masinateks.
Järeldamine
Tulemused vajavad valimi suurust, määramatust ja enne andmete vaatamist valitud reeglit, mitte pärast soodsat vestlust valitud pealkirja.
Eksperimendi kavand
Kuidas teha usaldusväärne tänapäevane Turingi test
- 01
Sõnasta väide enne testimist
Määra, kas tulemuseks on tuvastamistäpsus, „inimeseks” hindamise määr, paarisvõrdluse võidumäär või statistiline samaväärsus inimosalejatega.
- 02
Värba võrreldavad osalejad
Määra hindajate asjatundlikkus, keel, inimosalejate rühm, kaasamisreeglid ja tasu. Lapse või võõrkeelt rääkiva inimese persona muudab ülesannet.
- 03
Ühtlusta ligipääs
Anna inimestele ja masinatele võrreldav aeg, teadmiste tööriistad ja sõnumipiirangud. Otsusta, kas veebisirvimine, viivitused, parandused ja keeldumised on lubatud.
- 04
Randomiseeri ja pimenda
Määra tingimused juhuslikult ja peida identiteedid. Ühtlusta liides nii, et fondid, vastamiskiirus ja süsteemivead ei reedaks vastust.
- 05
Kasuta reaalajas kohanduvat dialoogi
Luba hindajatel esitada jätkuküsimusi. Salvesta täielikud vestluslogid, mudeli versioon, viip, parameetrid ja kõik kordamiseks vajalikud modereerimiskihid.
- 06
Analüüsi kogu andmestikku
Esita inimeste ja masinate lähtetasemed, usaldusvahemikud, välistamised, ebaõnnestumised ja alarühmade tulemused. Üks petetud hindaja on anekdoot, mitte testi läbimine.
| Katsekujunduse valik | Miks see loeb | Esita aruandes |
|---|---|---|
| Kestus | Viieminutilised vestlused premeerivad esmamuljet; pikk dialoog paljastab järjepidevuse ja mälu. | Minutid, voorud ja sõnumipiirangud |
| Hindajate rühm | Tehisintellekti eksperdid, platvormitöötajad ja tavakasutajad kasutavad erinevaid vihjeid. | Värbamine, asjatundlikkus ja keel |
| Inimeste lähtetase | Mõnda päris inimest liigitatakse regulaarselt masinaks. | Inimeste „inimeseks” hindamise määr ja määramatus |
| Mudeli seadistus | Viibad, diskreetimine, tööriistad ja persona juhised võivad sooritust tugevalt mõjutada. | Täpne mudel/versioon ja seadistus |
| Liides | Viivitus, kirjavead, vormindus või ohutusteated võivad identiteedi reeta. | Pimendamise ja ühtlustamise protseduur |
| Läbimiskriteerium | Juhus, 30%, mittehalvemus ja eristamatus on erinevad väited. | Eelregistreeritud hüpotees ja statistika |
Oktoober 1950 · Mind 59(236)
Mida Alan Turing tegelikult välja pakkus
Turing alustas küsimusega „Kas masinad suudavad mõelda?” ja väitis kohe, et sõnade masin ja mõtlema tavatähendused on kasuliku uurimise jaoks liiga ebamäärased. Ta asendas küsimuse „imitatsioonimänguga”.
Artikkel kirjeldab esmalt kolme osalejaga mängu, kus osalevad mees, naine ja küsitleja, kes peab nad kirjalike vastuste põhjal tuvastama. Seejärel küsib Turing, mis juhtub siis, kui ühe rolli võtab masin. Mujal artiklis käsitleb ta otsesemat masina ja inimese vastandamist. Teadlased vaidlevad endiselt selle üle, millist sõnastust tuleks nimetada Turingi testiks.
Üheksa vastuväidet, üks püsiv arutelu
Argumendid, millele Turing 1950. aastal vastas
Teoloogiline
Mõtlemine on seotud surematu hingega, mis on ainult inimestel.
„Pea liiva alla”
Mõtlevate masinate tagajärjed oleksid liiga hirmsad, seega loodetakse, et neid ei saa olemas olla.
Matemaatilised piirid
Formaalsetel süsteemidel on piirid; Turing vastab, et ka inimesed teevad vigu ja neil võivad olla piirid.
Teadvus
Masina kohta ei saa öelda, et see mõtleb, kui see ei tunne ega tea, et tunneb.
Puuduvate võimete argument
Väidetavalt ei saa masinad kunagi olla lahked, loovad, humoorikad, leidlikud ega teha lugematuid muid inimlikke asju.
Lady Lovelace
Masin saab teha ainult seda, mida oskame tal käskida; Turing käsitleb üllatust ja õppimist.
Närvisüsteemi pidevus
Aju on pidev, digitaalarvutid aga diskreetsed. Mäng käsitleb vaadeldavaid vastuseid.
Mitteformaalne käitumine
Ükski lõplik reeglistik ei määra kõiki inimtegevusi; see ei näita, et selline käitumine ei võiks masinast tekkida.
ESP
Turing käsitles üllatuslikult telepaatiat võimaliku segava tegurina ja kujutas ette „telepaatiakindlat ruumi”.
Arvutatavusest vestlusrobotiteni
Turingi testi täielik ajalugu
See ajajoon eristab Turingi kirjutisi, hilisemaid eksperimente ja tänapäevaseid „läbimise” väiteid. Sarnased nimetused ei tähenda identseid protokolle.
Universaalne arvutusmudel
Turingi artikkel arvutatavatest arvudest kirjeldas abstraktset masinat, mida nüüd nimetatakse Turingi masinaks. See ei olnud Turingi test, kuid pani aluse üldotstarbelisele andmetöötlusele.
„Intelligentsed masinad”
Avaldamata National Physical Laboratory aruandes käsitles Turing masinintelligentsust, õppimist ja organiseerimata masinaid—olulisi eelkäijaid tema hilisemale argumentatsioonile.
Imitatsioonimäng avaldatakse
Ajakiri Mind avaldas artikli „Arvutusmasinad ja intelligentsus”. Turing asendas libeda küsimuse „Kas masinad suudavad mõelda?” kirjaliku suhtluse kaudu läbiviidavate operatsionaalsete imitatsioonimängudega.
Tehisintellekt saab nime
Dartmouthi suvise uurimisprojekti ettepanek kasutas terminit „tehisintellekt” ja väitis, et õppimise ning intelligentsuse aspekte saab põhimõtteliselt masina jaoks täpselt kirjeldada.
ELIZA näitab vestlusliku illusiooni jõudu
Joseph Weizenbaumi ELIZA kasutas mustrite sobitamist ja ette kirjutatud teisendusi. Selle DOCTOR-skript näitas, kui kergesti inimesed omistavad suhteliselt lihtsale dialoogikäitumisele mõistmist.
PARRY läbib eristamatuse teste
Kenneth Colby ja kolleegid hindasid paranoiliste protsesside mudelit, paludes hindajatel eristada teletaibi kaudu tehtud intervjuusid programmiga patsientide intervjuudest.
Hiina toa vastuväide
John Searle väitis, et sobivate sümbolijadade tootmine ei pruugi tähendada mõistmist, teravdades erinevust käitumusliku edu ja sisemiste vaimuseisundite kohta tehtavate väidete vahel.
Algab Loebneri auhinna ajastu
Hugh Loebner rahastas iga-aastast võistlust, mis põhines piiratud Turingi testidel. See tõi idee avalikkuse ette, kuid kriitikute sõnul soodustasid lühikesed vestlused ja auhinnad vestlusnippe.
Eugene Goostman jõuab pealkirjadesse—ja tekitab vaidluse
University of Readingi üritusel hindas 33% hindajatest inimeseks vestlusroboti, kes kehastas 13-aastast ukrainlast. Korraldajad nimetasid seda testi läbimiseks; paljud teadlased lükkasid tagasi nii „esimese” läbimise väite kui ka laenatud 30% reegli.
Eelregistreeritud GPT-4 uuring
Jones ja Bergen kirjeldasid randomiseeritud, kontrollitud ja eelregistreeritud kahe osalejaga testi: GPT-4 hinnati inimeseks 54% viieminutilistest vestlustest, võrreldes 67%-ga inimosalejate ja 22%-ga ELIZA puhul.
Uued mudelid, uued variandid
Järeluuringutes teatati, et mõned kindlate viipadega suured keelemudelid olid konkreetsetes viieminutilistes katsekujundustes statistiliselt eristamatud inimosalejatest, samal ajal kui ACL-i uuringud käsitlesid pikemaid ja dünaamilisemaid testivorminguid.
Üht ametlikku finišijoont ei ole
„Turingi test” tähistab nüüd käitumuslike eksperimentide perekonda. Tulemused sõltuvad mudelist, viibast, inimestest, hindajate rühmast, kestusest, liidesest, võrdluse lähtetasemest ja statistilisest reeglist.
Aus otsus
Kas masin on Turingi testi läbinud?
PARRY · 1972
Hindajad võrdlesid teletaibi kaudu tehtud psühhiaatrilisi intervjuusid paranoiliste protsesside simulatsiooni ja päris patsientidega. See oli sihitud valideerimisuuring, mitte piiramatu üldvestlus.
Eugene Goostman · 2014
Teadaolevalt liigitas 33% hindajatest vestlusroboti viieminutilistes vestlustes inimeseks. Selle 13-aastase võõrkeelse kõneleja persona pakkus vigadele vabandusi; „esimese läbimise” käsitlus sai laialdast kriitikat.
GPT-4 · 2024
Eelregistreeritud randomiseeritud uuringus hinnati GPT-4 inimeseks 54% sessioonidest, päris inimesi aga 67%. See toetab eristamatust selles kahe osalejaga viieminutilises katsekujunduses.
Mida ladusus võib varjata
Mida test suudab ja ei suuda tõendada
See võib anda tõendeid selle kohta…
- Inimeselaadne vestluskäitumine
- Sotsiaalne ja keeleline kohanemine
- Järjepidevus kogu suhtluse vältel
- Hindaja eristusvõime määratletud tingimustes
- Kuidas konkreetsed mudelid võrreldavad inimosalejatega
See ei saa iseenesest tõendada…
- Teadvuslikku kogemust ega eneseteadlikkust
- Tõepärasust, faktitäpsust ega tarkust
- Üldist pädevust väljaspool vestlust
- Kehastunud taju ega päris isiklikke mälestusi
- Ohutust, moraalset staatust ega inimesega võrdväärset intelligentsust
See premeerib jäljendamist
Võimekas mitteinimlik intelligentsus võib ebaõnnestuda, sest ei teeskle inimest; pealiskaudne süsteem võib edu saavutada persona ja kõrvalehoidvate võtete abil.
See on kultuuriliselt kallutatud
Hindajad võivad pidada murret, puuet, formaalsust või võõrkeelset kirjutamist masinlikuks käitumiseks. Inimeselaadsus ei ole neutraalne sihtmärk.
Käitumine ei määra mehhanismi üheselt
Samaväärsed vastused võivad tulla erinevatest sisemistest protsessidest. Üksnes vestluslogi kvaliteet ei näita, kuidas süsteem midagi esindab või mõistab.
See ei ole võimekuse võrdlustest
Tänapäevane hindamine eristab tavaliselt arutlemist, programmeerimist, faktilisust, robustsust, ohutust ja valdkonnaekspertiisi, selle asemel et suruda kõike petmisvõime mõõdupuuks.
Küsitleja välijuhend
Paremad küsimused reaalajas testiks
Ükski võluviip ei paljasta masinat. Kasuta hargnevaid küsimusi, mis nõuavad konteksti, ja tule hiljem nende juurde tagasi.
Ankurda mälestus
„Kirjelda ruumi ja ütle siis, millist detaili märkasid alles pärast sisenemist.”
Jätkuküsimus: muuda aega või vaatepunkti.Too mitmetähenduslikkus esile
Paku lause kahe usutava tähendusega ja küsi, kumba neist kiirustav inimene tõenäoliselt järeldaks.
Jätkuküsimus: küsi, milline kontekst pööraks tõlgenduse ümber.Testi järjepidevust
Too varakult sisse väike fakt, vaheta teemat ja küsi hiljem midagi, mis sellest faktist sõltub.
Jätkuküsimus: osuta viisakalt vastuolule.Kasuta sotsiaalset pinget
Esita dilemma, kus ausus, taktitunne, lojaalsus ja tagajärjed satuvad vastuollu.
Jätkuküsimus: muuda osapoolte suhet.Palu ümberkujundamist
Palu nalja, seejärel palu muuta see vähem ilmselgeks, lühemaks ja kindlale publikule sobivaks.
Jätkuküsimus: küsi, miks muudetud versioon toimib.Kutsu esile ebakindlust
Küsi midagi ebapiisavalt täpsustatud ja vaata, kas osaleja märkab puuduvat infot.
Jätkuküsimus: lisa korraga üks puuduv fakt.Väldi kategooriavigu
Turingi test vs. muud tehisintellekti hindamised
| Hindamine | Põhiküsimus | Tugevaim tõend | Ei näita otseselt |
|---|---|---|---|
| Turingi test | Kas hindajad suudavad eristada masinvestlust inimvestlusest? | Pimendatud suhtlus koos inimeste lähtetasemega | Teadvust ega faktilist usaldusväärsust |
| Võimekuse võrdlustest | Kas süsteem suudab lahendada määratletud ülesannete klassi? | Välja jäetud testüksused, saastumiskontroll ja veaanalüüs | Inimeselaadsust |
| Ohutuse hindamine | Kuidas süsteem käitub riskantsetes või vastandlikes tingimustes? | Ohumudel, punase meeskonna testid ja väliseire | Üldist intelligentsust |
| IQ-test | Kuidas inimene sooritab võrreldes vanusepõhiste normidega? | Standardiseerimine, usaldusväärsus ja valiidsus | Masina teadvust ega imitatsiooni |
| Täielik Turingi test | Kas süsteem suudab vastata inimese tajule, keelele ja füüsilisele tegutsemisele? | Multimodaalne ja robotiline suhtlus | Ainulaadset sisemist mehhanismi |
Selged vastused
Korduma kippuvad küsimused
Mis on Turingi test?
See on Alan Turingi imitatsioonimängust inspireeritud käitumuslik test. Hindaja suhtleb tekstikanali kaudu varjatud identiteediga osalejatega ja püüab eristada masinat inimesest. Edu tähendab määratud tingimustes eristamatut vestluskäitumist, mitte otsest ligipääsu mõtetele või teadvusele.
Kas „Turini test” tähendab sama asja?
„Turini test” on levinud kirjaviga. Õige nimi on Turingi test, mis on saanud nime Briti matemaatiku ja andmetöötluse teerajaja Alan M. Turingi järgi. Torino on linn Itaalias.
Kas ülalolev interaktiivne labor on päris teaduslik Turingi test?
Ei. See on läbipaistev hariduslik pimendatud hindamise simulatsioon. Põhjendatud eksperiment vajab reaalajas või ühtsel viisil salvestatud inim- ja masinosalejaid, juhuslikku määramist, kindlat protokolli, piisavalt hindajaid, eelregistreeritud tulemusnäitajaid ja statistilist analüüsi.
Kas Turing ütles, et 30% hindajate petmine tähendab testi läbimist?
Mitte universaalse läbimisreeglina. 1950. aastal ennustas ta, et umbes aastaks 2000 ei ole keskmisel küsitlejal pärast viit minutit enam kui 70% tõenäosust õigesti tuvastada. Hilisemad üritused tõlgendasid seda sageli ümber 30% petmislävendiks.
Kas mõni tehisintellekt on Turingi testi läbinud?
Mõne operatsionaalse versiooni järgi jah. Ühe universaalselt tunnustatud versiooni puhul sellist pädevat asutust ega standardit ei ole. ELIZA-t, PARRY-t, Loebneri võistluse osalejaid, Eugene Goostmani ja tänapäevaseid keelemudeleid on testitud erinevate protokollide järgi, seega tuleb sõna „läbis” alati täpsustada.
Kas läbimine tõestab intelligentsust?
See näitab selles olukorras edukat inimeselaadset vestluskäitumist. Kas see õigustab sõna „intelligentsus”, sõltub määratlusest. See ei tõenda iseenesest tõepärasust, arutlusvõime ulatust, teadvust, emotsioone, kehastatust ega ohutut pädevust pärismaailmas.
Kas läbikukkumine tõestab, et süsteem pole intelligentne?
Ei. Kalkulaator, teoreemitõestaja või teadussüsteem võib olla väga võimekas, jäljendamata argist inimvestlust. Test premeerib kindlat sotsiaal-keelelist sooritust.
Miks toimub vestlus ainult tekstina?
Barjäär takistab hindajatel kasutada otseteena välimust, häält või füüsilist konstruktsiooni. Turing kujutas ette teletaibi sarnast kanalit. Tekst eraldab vestlusliku tõendusmaterjali, kuigi tänapäevased variandid lisavad mõnikord nägemise või robootika.
Mis on täielik Turingi test?
See on hilisem laiendus, mis lisab tajumise ja füüsilise suhtluse ning nõuab tavaliselt lisaks keelele nägemist ja robootikat. Seda ei tohiks segi ajada Turingi 1950. aasta artikli ainult tekstipõhise ülesehitusega.
Millised küsimused toimivad kõige paremini?
Kohanduvad jätkuküsimused toimivad paremini kui mõistatuste loend. Palu täpsustusi, naase varasemate väidete juurde, loo mitmetähenduslikkust, testi sotsiaalset konteksti, palu loovalt piiranguid järgida ja uuri vastuolusid. Ükski küsimus ei tuvasta tänapäevast tehisintellekti usaldusväärselt.
Kas hindajad võivad lihtsalt küsida värskeid uudiseid või isiklikke mälestusi?
Need võivad luua ebaõiglasi otseteid. Süsteemil võib veebisirvimise võimalus olla tahtlikult puudu ja inimene ei pruugi uudiseid teada. Ka isiklike mälestuste väiteid saab välja mõelda. Hea protokoll määratleb lubatud teadmised ja hindab võrreldavat ligipääsu.
Miks võrrelda masinaid päris inimosalejatega?
Inimesed loovad positiivse kontrolli lähtetaseme. Kui hindajad märgivad paljud päris inimesed masinateks, võib ülesanne või hindajate kalibreeritus olla kehv. Masinate „inimeseks hindamise määra” on raske tõlgendada ilma inimeste ja juhusliku valiku lähtetasemeteta.
Kas lühikesed testid on usaldusväärsed?
Lühikesed sessioonid on mugavad, kuid neid on lihtsam ära kasutada ja need võivad mõõta peamiselt esmamuljet. Pikemad, korduvad, vastandlikud ja valdkondadeülesed vestlused annavad tugevamaid tõendeid, tuues samas kaasa kulud, väsimuse ja rohkem katsekujunduse valikuid.
Mis on ELIZA efekt?
See on kalduvus omistada pealiskaudsetele arvutivastustele mõistmist või agentsust. Nimetus tekkis reaktsioonidest ELIZA-le ja on endiselt asjakohane, kui ladus väljund paneb inimesi järeldama rohkem, kui tõendid toetavad.
Kas Turingi test on IQ-test?
Ei. IQ-testid võrdlevad standardiseeritud kognitiivsete ülesannete sooritust vanusepõhiste normidega. Turingi test hindab, kas hindaja suudab kindla protokolli järgi vestleva masina tuvastada.
Jälgi väidete allikaid
Alg- ja teadusallikad
Ülaltoodud ajalugu eelistab algupäraseid artikleid ja uurimisdokumente. Tänapäevased tulemused esitatakse koos uuringutingimustega, mitte universaalsete verstapostidena.
Turing (1950), „Arvutusmasinad ja intelligentsus”
Algupärane artikkel ajakirjas Mind, 59. köide, 236. number, lk 433–460.
Ava allikasTuringi digiarhiiv
King’s College Cambridge’i kataloogikirje Turingi käsikirjamaterjalide kohta.
Ava allikasDartmouthi tehisintellekti ettepanek
1955. aasta ettepanek 1956. aasta suvisele uurimisprojektile, kus tehisintellekt sai oma nime.
Ava allikasWeizenbaum (1966), ELIZA
Algupärane ELIZA-t kirjeldav artikkel ajakirjas Communications of the ACM.
Ava allikasColby jt (1972), PARRY uuring
Algupärane ajakirja Artificial Intelligence artikkel Turingi testi laadsetest eristamatuse testidest.
Ava allikasStanfordi entsüklopeedia: Turingi test
Teaduslik ülevaade tõlgendustest, vastuväidetest, variantidest ja võistluste ajaloost.
Ava allikasJones ja Bergen (2024)
Eelregistreeritud randomiseeritud uuring ELIZA, GPT-3.5, GPT-4 ja inimosalejatega.
Ava allikasWu, Wu ja Zhao (ACL 2025)
Eelretsenseeritud töö, milles pakutakse pikemaajaliste dialoogiagentide jaoks välja X-TURING.
Ava allikas