Pirmiausia perskaitykite tai
Tikra idėja – atkurta be fiktyvių mokslinių teiginių
Toliau esanti interaktyvi laboratorija tiksliai atkuria aklą palyginimą, privalomą pasirinkimą, pasitikėjimo įvertinimą ir informacijos atskleidimą po testo. Jos pokalbiai yra redakcinės simuliacijos, o ne gyvo kontroliuojamo tyrimo įrašai. Jūsų rezultatas parodo, kaip jūsų spėjimai sutampa su paslėptomis šios demonstracijos žymomis; jis neįrodo, ar šiandieninis DI mąsto.
Įrodymai peržiūrėti ir puslapis atnaujintas 2026-08
Interaktyvus eksperimentas
Imitacijos žaidimo laboratorija
Jūs esate apklausėjas. Kiekviename raunde vienas atsakymas turi paslėptą simuliacijos mašinos žymą, o kitas – žmogaus žymą. Pasirinkite mašiną ir nurodykite savo pasitikėjimą.
Eiga0/8
Sąžiningumo žyma: tai sąmoningai sukurti mokomieji pavyzdžiai, o ne gyvi žmonės ar įvardyto modelio išvestys. Jie parodo įprastas užuominas ir kodėl jos nepatikimos.
Jūsų vaidmuoVertinate atsakymus – patys į užklausas neatsakote
- 1
Perskaitykite abiejų dalyvių atsakymus. Palyginkite, kaip A ir B reaguoja į tą pačią užklausą.
- 2
Pasirinkite atsakymą, kuris, jūsų manymu, pažymėtas kaip mašinos. Kiekvienoje poroje toks yra lygiai vienas.
- 3
Nustatykite pasitikėjimą nuo 50 iki 100 %. 50 % rinkitės, kai tai monetos metimas; 100 % – tik jei esate visiškai tikri.
Naudingos, bet netobulos užuominos:kontekstas ir pragmatiškas sprendimaskonkretumas be perdėto aiškinimonuoseklumasnatūralus pasitaisymasprisitaikantis humorasVien tobula gramatika neįrodo, kad rašė mašina.
0/8teisingi
Jūsų vertinimo ataskaita
Rezultatas
Ką tai sako apie jus:
Mašina jus suklaidino0 kartų
Jos atsakymą palaikėte žmogaus atsakymu.
Žmogus palaikytas mašina0 kartų
Žmogaus pažymėtą tekstą laikėte mašinišku.
Jūsų mašiniško stiliaus užuominaMišrios
Atsakymo tipas, kurį dažniausiai įtarėte.
Kiek buvote arti „elgesio kaip mašina“?
Šis testas to nematuoja. Niekada neatsakinėjote kaip Dalyvis A ar B, todėl būtų klaidinama vertinti jūsų pačių elgesį kaip panašų į žmogaus ar mašinos. Testas matuoja jūsų atpažinimo strategiją: kokius rašymo bruožus siejate su mašinomis, kaip dažnai šios prielaidos pasiteisino ir ar jūsų pasitikėjimas atitiko tikslumą.
Nepervertinkite šio rezultato. Rinkinys mažas ir tyčia iliustracinis. Jis neturi reprezentatyvios imties, patvirtinto sudėtingumo ar gyvo prisitaikančio klausinėjimo.
Esminė apibrėžtis
Ką iš tikrųjų tikrina Tiuringo testas
Apklausėjasklausia, tikslina, vertina
teksto kanalas
Dalyvis Atapatybė paslėpta
?
Dalyvis Btapatybė paslėpta
Elgesio kriterijus, o ne smegenų skenavimas
Vertintojo užduotis yra epistemologinė: Ar iš pokalbio galiu nustatyti, kuris dalyvis yra mašina? Ekranas pašalina išvaizdą, balsą ir mechaninę konstrukciją. Jei pagal protokolą mašinos elgesys tampa neatskiriamas nuo žmogaus elgesio, mašina sėkmingai atlieka šią imitacijos užduotį.
Atsargiai suformuluotas teiginys: „Šiame eksperimente mašina nebuvo patikimai atskirta nuo žmogaus, su kuriuo buvo lyginama.“ Tai stipresnis teiginys nei vien pasakyti, kad ji skambėjo sklandžiai, ir siauresnis nei paskelbti ją sąmoninga.
Aklinimas
Vertintojas neturėtų žinoti dalyvio tapatybės ar gauti šalutinių užuominų, pavyzdžiui, iš rašymo greičio, sąsajos skirtumų ar metaduomenų.
Palyginimas
Žmonės dalyviai yra svarbūs. Jų atpažinimo rodiklis parodo, kaip dažnai tikri žmonės tomis pačiomis sąlygomis palaikomi mašinomis.
Išvada
Rezultatams reikia imties dydžių, neapibrėžtumo ir taisyklės, pasirinktos prieš peržiūrint duomenis, o ne antraštės, išrinktos po palankaus pokalbio.
Eksperimento planas
Kaip atlikti patikimą šiuolaikinį Tiuringo testą
- 01
Prieš testą užrašykite teiginį
Nurodykite, ar rezultatas yra atpažinimo tikslumas, „žmogaus“ įvertinimų dalis, porinio palyginimo pergalių rodiklis ar statistinis lygiavertiškumas žmonėms dalyviams.
- 02
Atrinkite palyginamus dalyvius
Apibrėžkite vertintojų kompetenciją, kalbą, žmonių dalyvių grupę, įtraukimo taisykles ir atlygį. Vaiko personažas ar ne gimtąja kalba kalbančio asmens personažas pakeičia užduotį.
- 03
Standartizuokite prieigą
Žmonėms ir mašinoms suteikite palyginamą laiką, žinių įrankius ir pranešimų limitus. Nuspręskite, ar leidžiamas naršymas internete, delsos, taisymai ir atsisakymai atsakyti.
- 04
Atsitiktinai paskirstykite ir užmaskuokite
Sąlygas priskirkite atsitiktinai ir paslėpkite tapatybes. Suvienodinkite sąsają, kad šriftai, atsakymo laikas ir sistemos klaidos neišduotų atsakymo.
- 05
Naudokite gyvą, prisitaikantį dialogą
Leiskite vertintojams užduoti papildomus klausimus. Užfiksuokite visus pokalbių nuorašus, modelio versiją, užklausą, parametrus ir bet kokį moderavimo sluoksnį, reikalingą rezultatams atkartoti.
- 06
Analizuokite visą duomenų rinkinį
Pateikite žmonių ir mašinų atskaitos rezultatus, pasikliautinuosius intervalus, pašalinimus, nesėkmes ir pogrupių rezultatus. Vienas suklaidintas vertintojas yra anekdotas, o ne testo išlaikymas.
| Projektavimo pasirinkimas | Kodėl tai svarbu | Ką pateikti |
|---|---|---|
| Trukmė | Penkių minučių pokalbiai apdovanoja pirmąjį įspūdį; ilgas dialogas atskleidžia nuoseklumą ir atmintį. | Minutės, ėjimai ir pranešimų limitai |
| Vertintojų grupė | DI ekspertai, platformų darbuotojai ir paprasti naudotojai remiasi skirtingomis užuominomis. | Atranka, kompetencija ir kalba |
| Žmonių atskaitos rezultatas | Kai kurie tikri žmonės nuolat palaikomi mašinomis. | Žmonių „žmogaus“ įvertinimų dalis ir neapibrėžtumas |
| Modelio sąranka | Užklausos, atrankos parametrai, įrankiai ir personažo instrukcijos gali lemti didžiąją rezultato dalį. | Tiksli modelio versija ir sąranka |
| Sąsaja | Delsa, rašybos klaidos, formatavimas ar saugos pranešimai gali išduoti tapatybę. | Aklinimo ir suvienodinimo procedūra |
| Išlaikymo kriterijus | Atsitiktinumas, 30 %, ne mažesnio veiksmingumo kriterijus ir neatskiriamumas yra skirtingi teiginiai. | Iš anksto užregistruota hipotezė ir statistika |
1950 m. spalis · Mind 59(236)
Ką iš tikrųjų pasiūlė Alanas Turingas
Turingas pradėjo klausimu „Ar mašinos gali mąstyti?“ ir iškart teigė, kad įprastos mašina ir mąstyti reikšmės yra pernelyg dviprasmiškos naudingai apklausai. Jis pasiūlė „imitacijos žaidimą“.
Straipsnyje pirmiausia aprašomas trijų asmenų žaidimas, kuriame dalyvauja vyras, moteris ir apklausėjas, turintis juos atpažinti iš rašytinių atsakymų. Tada Turingas klausia, kas nutiktų, jei vieną vaidmenį atliktų mašina. Kitoje straipsnio vietoje jis aptaria tiesioginį mašinos ir žmogaus palyginimą. Mokslininkai iki šiol diskutuoja, kurią formuluotę reikėtų vadinti tikruoju Tiuringo testu.
Devyni prieštaravimai, viena ilgalaikė diskusija
Argumentai, kuriuos Turingas nagrinėjo 1950 m.
Teologinis
Mąstymas siejamas su nemirtinga siela, kurią turi tik žmonės.
„Galvos smėlyje“
Mąstančių mašinų pasekmės būtų pernelyg baisios, todėl norisi tikėti, kad jos negali egzistuoti.
Matematinės ribos
Formalios sistemos turi ribas; Turingas atsako, kad žmonės taip pat klysta ir gali turėti ribų.
Sąmoningumas
Mašinos negalima vadinti mąstančia, jei ji nejaučia ir nežino, kad jaučia.
Įvairūs negebėjimai
Teigiama, kad mašinos niekada negalės būti malonios, kūrybingos, humoristinės, išradingos ar pasižymėti daugybe kitų žmogiškų savybių.
Lady Lovelace
Mašina gali daryti tik tai, ką mokame jai nurodyti; Turingas svarsto netikėtumą ir mokymąsi.
Nervų sistemos tęstinumas
Smegenų veikla yra tęstinė, o skaitmeniniai kompiuteriai – diskretūs. Žaidime vertinami stebimi atsakymai.
Neformalus elgesys
Joks baigtinis taisyklių rinkinys neapibrėžia visų žmogaus veiksmų; tai neįrodo, kad elgesys negali kilti iš mašinos.
ESP
Turingas stebėtinai laikė telepatiją galimu trikdžiu ir įsivaizdavo „telepatijai atsparų kambarį“.
Nuo apskaičiuojamumo iki pokalbių robotų
Visa Tiuringo testo istorija
Ši laiko juosta atskiria Turingo raštus, vėlesnius eksperimentus ir šiuolaikinius teiginius apie „išlaikymą“. Panašūs pavadinimai nereiškia vienodų protokolų.
1936
Skyrius 01
Universalus skaičiavimo modelis
Turingo straipsnyje apie apskaičiuojamus skaičius aprašyta abstrakti mašina, dabar vadinama Tiuringo mašina. Tai nebuvo Tiuringo testas, tačiau šis darbas padėjo pagrindą bendrosios paskirties skaičiavimui.
1948
Skyrius 02
„Intelektualios mašinos“
Neskelbtoje Nacionalinės fizikos laboratorijos ataskaitoje Turingas aptarė mašininį intelektą, mokymąsi ir neorganizuotas mašinas – svarbius vėlesnio jo argumento pirmtakus.
1950
Skyrius 03
Paskelbiamas imitacijos žaidimas
Žurnalas „Mind“ paskelbė „Computing Machinery and Intelligence“. Turingas sunkiai apibrėžiamą klausimą „Ar mašinos gali mąstyti?“ pakeitė operaciniais imitacijos žaidimais, vykdomais rašytiniu ryšiu.
1956
Skyrius 04
Dirbtinis intelektas gauna pavadinimą
Dartmuto vasaros tyrimų pasiūlyme pavartotas terminas „dirbtinis intelektas“ ir teigta, kad mokymosi bei intelekto aspektus iš principo galima aprašyti pakankamai tiksliai, kad juos įgyvendintų mašina.
1966
Skyrius 05
ELIZA parodo pokalbio iliuziją
Josepho Weizenbaumo ELIZA naudojo šablonų atpažinimą ir scenarijais paremtas transformacijas. Jos DOCTOR scenarijus parodė, kaip lengvai žmonės gana paprastam dialogo elgesiui priskiria supratimą.
1972
Skyrius 06
PARRY susiduria su neatskiriamumo testais
Kennethas Colby su kolegomis vertino paranojinių procesų modelį, prašydami vertintojų atskirti teletaipu vykdytus pokalbius su programa nuo pokalbių su pacientais.
1980
Skyrius 07
Kinų kambario prieštaravimas
Johnas Searle'as teigė, kad tinkamų simbolių sekų generavimas nebūtinai reiškia supratimą, ir taip paryškino skirtumą tarp elgesio sėkmės bei teiginių apie vidines psichines būsenas.
1990–91
Skyrius 08
Prasideda Loebnerio premijos era
Hughas Loebneris finansavo kasmetinį konkursą, paremtą ribotais Tiuringo testais. Jis išpopuliarino idėją, tačiau kritikai teigė, kad trumpi pokalbiai ir prizai skatino pokalbio gudrybes.
2014
Skyrius 09
Eugene'as Goostmanas patenka į antraštes – ir sukelia ginčą
Readingo universiteto renginyje 13-mečiu ukrainiečiu apsimetęs robotas 33 % vertintojų buvo palaikytas žmogumi. Organizatoriai paskelbė, kad testas išlaikytas; daugelis tyrėjų atmetė teiginį apie „pirmąjį“ išlaikymą ir pasiskolintą 30 % taisyklę.
2024
Skyrius 10
Iš anksto užregistruotas GPT-4 tyrimas
Jonesas ir Bergenas paskelbė atsitiktinių imčių, kontroliuojamą ir iš anksto užregistruotą dviejų dalyvių testą: per penkių minučių pokalbius GPT-4 žmogumi palaikytas 54 % atvejų, žmonės dalyviai – 67 %, o ELIZA – 22 %.
2025
Skyrius 11
Nauji modeliai, nauji variantai
Tolesniuose darbuose nustatyta, kad kai kurie tinkamai suformuluotomis užklausomis valdomi didieji kalbos modeliai konkrečiuose penkių minučių bandymuose statistiškai nesiskyrė nuo žmonių dalyvių, o ACL tyrimuose nagrinėti ilgesni ir dinamiškesni testų formatai.
Šiandien
Skyrius 12
Vienos oficialios finišo linijos nėra
„Tiuringo testu“ dabar vadinama elgesio eksperimentų šeima. Rezultatai priklauso nuo modelio, užklausos, žmonių, vertintojų grupės, trukmės, sąsajos, palyginimo atskaitos ir statistinės taisyklės.
Sąžiningas verdiktas
Ar mašina išlaikė Tiuringo testą?
PARRY · 1972
Vertintojai lygino teletaipu vykdytus psichiatrinius pokalbius su paranojinių procesų simuliacija ir tikrais pacientais. Tai buvo kryptingas validavimo tyrimas, o ne nevaržomas bendrasis pokalbis.
Eugene'as Goostmanas · 2014
Pranešta, kad per penkių minučių pokalbius 33 % vertintojų robotą palaikė žmogumi. Jo 13-mečio, kuriam anglų kalba nėra gimtoji, personažas suteikė pateisinimų klaidoms; teiginys apie „pirmąjį išlaikymą“ buvo plačiai kritikuojamas.
GPT-4 · 2024
Iš anksto užregistruotame atsitiktinių imčių tyrime GPT-4 54 % seansų buvo įvertintas kaip „žmogus“, o tikri žmonės – 67 %. Tai pagrindžia neatskiriamumą būtent tame dviejų dalyvių penkių minučių eksperimente.
Antraščių dekoderis: Vien „suklaidino vertintojus“ nepakanka. Klauskite: su kokiais žmonėmis lyginta, kiek laiko, pagal kokią užklausą, kiek buvo bandymų ir koks statistinis testas taikytas?
Ką gali paslėpti sklandumas
Ką testas gali ir ko negali nustatyti
Jis gali suteikti įrodymų apie…
- Į žmogaus panašų pokalbio elgesį
- Socialinį ir kalbinį prisitaikymą
- Nuoseklumą sąveikos metu
- Vertintojo gebėjimą atskirti dalyvius apibrėžtomis sąlygomis
- Kaip konkretūs modeliai atrodo palyginti su žmonėmis dalyviais
Jis pats savaime negali įrodyti…
- Sąmoningos patirties ar savimonės
- Teisingumo, faktinio tikslumo ar išminties
- Bendrosios kompetencijos už pokalbio ribų
- Įkūnyto suvokimo ar tikrų asmeninių prisiminimų
- Saugos, moralinio statuso ar žmogui lygiaverčio intelekto
Jis apdovanoja imitaciją
Pajėgus nežmogiškas intelektas gali neišlaikyti, nes neapsimeta žmogumi; paviršutiniška sistema gali laimėti pasitelkusi personažą ir išsisukinėjimą.
Jis priklauso nuo kultūros
Vertintojai tarmę, negalią, formalų stilių ar rašymą ne gimtąja kalba gali palaikyti mašinos elgesiu. Panašumas į žmogų nėra neutralus tikslas.
Elgesys vienareikšmiškai neatskleidžia mechanizmo
Tokie patys atsakymai gali kilti iš skirtingų vidinių procesų. Vien pokalbio nuorašo kokybė neatskleidžia, kaip sistema reprezentuoja informaciją ar ją supranta.
Tai nėra gebėjimų lyginamasis testas
Šiuolaikiniame vertinime samprotavimas, programavimas, faktinis tikslumas, atsparumas, sauga ir sričių kompetencija paprastai vertinami atskirai, o ne suspaudžiami į vieną apgaulės rodiklį.
Apklausėjo lauko vadovas
Geresni klausimai gyvam testui
Nėra stebuklingos užklausos, kuri atskleistų mašiną. Naudokite išsišakojančius klausimus, reikalaujančius konteksto, o tada grįžkite prie ankstesnių atsakymų.
Įtvirtinkite prisiminimą
„Apibūdinkite kambarį, tada pasakykite, kurią detalę pastebėjote tik įėję.“
Papildomas klausimas: pakeiskite laiką arba žiūros tašką.Atskleiskite dviprasmybę
Pateikite sakinį su dviem tikėtinomis reikšmėmis ir paklauskite, kurią jų skubantis žmogus suprastų pirmiausia.
Papildomas klausimas: paklauskite, koks kontekstas apverstų interpretaciją.Tikrinkite tęstinumą
Pokalbio pradžioje įveskite nedidelį faktą, pakeiskite temą, o vėliau užduokite nuo to fakto priklausantį klausimą.
Papildomas klausimas: mandagiai atkreipkite dėmesį į nenuoseklumą.Pasitelkite socialinę trintį
Pateikite dilemą, kurioje konfliktuoja sąžiningumas, taktas, lojalumas ir pasekmės.
Papildomas klausimas: pakeiskite santykį tarp žmonių.Paprašykite transformacijos
Paprašykite pokšto, tada liepkite padaryti jį mažiau akivaizdų, trumpesnį ir tinkamą konkrečiai auditorijai.
Papildomas klausimas: paklauskite, kodėl nauja versija veikia.Pakvieskite pripažinti neapibrėžtumą
Paklauskite ko nors nepakankamai apibrėžto ir stebėkite, ar dalyvis pastebi, ko trūksta.
Papildomas klausimas: pateikite po vieną trūkstamą faktą.Venkite kategorijų klaidų
Tiuringo testas ir kiti DI vertinimai
| Vertinimas | Pagrindinis klausimas | Stipriausias įrodymas | Tiesiogiai neparodo |
|---|---|---|---|
| Tiuringo testas | Ar vertintojai gali atskirti mašinos pokalbį nuo žmogaus pokalbio? | Akla sąveika ir žmonių atskaitos rezultatas | Sąmoningumo ar faktinio patikimumo |
| Gebėjimų lyginamasis testas | Ar sistema gali išspręsti apibrėžtą užduočių klasę? | Atidėti testiniai elementai, užterštumo kontrolė, klaidų analizė | Panašumas į žmogų |
| Saugos vertinimas | Kaip sistema elgiasi rizikingomis ar priešiškomis sąlygomis? | Grėsmių modelis, raudonosios komandos testai, stebėsena realiame naudojime | Bendrasis intelektas |
| IQ testas | Kaip žmogaus rezultatai atrodo palyginti su amžiumi pagrįstomis normomis? | Standartizavimas, patikimumas ir pagrįstumas | Mašinos sąmoningumo ar imitacijos |
| Visiškasis Tiuringo testas | Ar sistema gali prilygti žmogaus suvokimui, kalbai ir fiziniams veiksmams? | Daugiarūšė ir robotinė sąveika | Unikalaus vidinio mechanizmo |
Aiškūs atsakymai
Dažniausiai užduodami klausimai
Kas yra Tiuringo testas?
Tai elgesio testas, įkvėptas Alano Turingo imitacijos žaidimo. Vertintojas tekstiniu kanalu bendrauja su paslėptais dalyviais ir bando atskirti mašiną nuo žmogaus. Sėkmė reiškia neatskiriamą pokalbio elgesį nurodytomis sąlygomis, o ne tiesioginę prieigą prie mąstymo ar sąmoningumo.
Ar „Turin testas“ yra tas pats?
„Turin testas“ yra dažna rašybos klaida. Tikras pavadinimas – Tiuringo testas, pavadintas britų matematiko ir skaičiavimo technikos pradininko Alano M. Turingo vardu. Turinas yra miestas Italijoje.
Ar aukščiau esanti interaktyvi laboratorija yra tikras mokslinis Tiuringo testas?
Ne. Tai skaidri mokomoji aklo vertinimo simuliacija. Pagrindžiamam eksperimentui reikia gyvų arba nuosekliai įrašytų žmonių ir mašinų dalyvių, atsitiktinio priskyrimo, apibrėžto protokolo, pakankamo vertintojų skaičiaus, iš anksto užregistruotų rezultatų ir statistinės analizės.
Ar Turingas sakė, kad mašina išlaiko testą suklaidinusi 30 % vertintojų?
Ne kaip universalią išlaikymo taisyklę. 1950 m. jis prognozavo, kad apie 2000 m. vidutinis apklausėjas po penkių minučių turės ne daugiau kaip 70 % tikimybę teisingai atpažinti dalyvį. Vėlesni renginiai tai dažnai perinterpretavo kaip 30 % apgaulės slenkstį.
Ar kuris nors DI išlaikė Tiuringo testą?
Pagal kai kurias operacines versijas – taip. Tačiau nėra vienos visuotinai priimtos versijos, institucijos ar standarto. ELIZA, PARRY, Loebnerio konkurso dalyviai, Eugene'as Goostmanas ir šiuolaikiniai kalbos modeliai buvo testuoti pagal skirtingus protokolus, todėl teiginį „išlaikė“ visada reikia patikslinti.
Ar testo išlaikymas įrodo intelektą?
Jis parodo sėkmingą į žmogaus panašų pokalbio elgesį konkrečiomis sąlygomis. Ar tai verta vadinti intelektu, priklauso nuo apibrėžties. Savaime tai neįrodo teisingumo, samprotavimo aprėpties, sąmoningumo, emocijų, įkūnijimo ar saugios kompetencijos realiame pasaulyje.
Ar testo neišlaikymas įrodo, kad sistema neprotinga?
Ne. Skaičiuotuvas, teoremų įrodymo programa ar mokslinė sistema gali būti labai pajėgi neimituodama kasdienio žmogaus pokalbio. Testas apdovanoja konkretaus tipo socialinį ir kalbinį elgesį.
Kodėl pokalbis vyksta tik tekstu?
Užtvara neleidžia vertintojams naudoti išvaizdos, balso ar fizinės konstrukcijos kaip lengvų užuominų. Turingas įsivaizdavo į teletaipą panašų kanalą. Tekstas izoliuoja pokalbio įrodymus, nors šiuolaikiniai variantai kartais prideda regą ar robotiką.
Kas yra Visiškasis Tiuringo testas?
Tai vėlesnis išplėtimas, pridedantis suvokimą ir fizinę sąveiką – paprastai regą bei robotiką kartu su kalba. Jo nereikėtų painioti su tik tekstu vykdomu 1950 m. Turingo straipsnyje aprašytu bandymu.
Kokie klausimai veikia geriausiai?
Prisitaikantys papildomi klausimai veikia geriau nei mįslių sąrašas. Prašykite patikslinti, grįžkite prie ankstesnių teiginių, įveskite dviprasmybę, tikrinkite socialinį kontekstą, prašykite kūrybiškai laikytis apribojimų ir ieškokite prieštaravimų. Nė vienas klausimas patikimai neatpažįsta šiuolaikinio DI.
Ar vertintojai gali tiesiog klausti apie naujausias žinias ar privačius prisiminimus?
Tai gali sukurti nesąžiningų trumpųjų kelių. Sistema gali būti sąmoningai sukurta be naršymo, o žmogus gali nežinoti naujienų. Teiginius apie asmeninius prisiminimus taip pat galima išgalvoti. Geras protokolas apibrėžia leidžiamas žinias ir vertina palyginamą prieigą.
Kodėl mašinas reikia lyginti su tikrais žmonėmis dalyviais?
Žmonės nustato teigiamos kontrolės atskaitą. Jei vertintojai daug tikrų žmonių pažymi kaip mašinas, užduotis arba vertintojų kalibravimas gali būti prasti. Mašinos „palaikymo žmogumi rodiklį“ sunku interpretuoti be žmonių ir atsitiktinumo atskaitų.
Ar trumpi testai patikimi?
Trumpi bandymai patogūs, bet juos lengviau „apžaisti“, todėl jie gali daugiausia matuoti pirmąjį įspūdį. Ilgesni, kartotiniai, priešiški ir kelias sritis apimantys pokalbiai suteikia stipresnių įrodymų, nors didina sąnaudas, nuovargį ir projektavimo pasirinkimų skaičių.
Kas yra ELIZA efektas?
Tai polinkis paviršutiniškiems kompiuterio atsakymams priskirti supratimą ar veiksnumą. Pavadinimas kilo iš reakcijų į ELIZA ir tebėra aktualus, kai sklandus tekstas skatina žmones daryti platesnes išvadas, nei leidžia įrodymai.
Ar Tiuringo testas yra IQ testas?
Ne. IQ testuose standartizuotų pažintinių užduočių rezultatai lyginami su amžiumi pagrįstomis normomis. Tiuringo testas vertina, ar pagal konkretų protokolą vertintojas gali atpažinti pokalbyje dalyvaujančią mašiną.
Atsekite teiginius
Pirminiai ir moksliniai šaltiniai
Aukščiau pateiktoje istorijoje pirmenybė teikiama originaliems straipsniams ir tyrimų įrašams. Šiuolaikiniai rezultatai pateikiami su jų tyrimo sąlygomis, o ne reklamuojami kaip universalūs etapai.
Turingas (1950), „Computing Machinery and Intelligence“
Pirminis straipsnis žurnalo „Mind“ 59 tome, 236 numeryje, 433–460 puslapiuose.
Atverti šaltinįTuringo skaitmeninis archyvas
King's College Cambridge katalogo įrašas apie Turingo rankraščių medžiagą.
Atverti šaltinįDartmuto DI pasiūlymas
1955 m. pasiūlymas 1956 m. vasaros tyrimų projektui, kuriame dirbtiniam intelektui suteiktas pavadinimas.
Atverti šaltinįWeizenbaumas (1966), ELIZA
Originalus „Communications of the ACM“ straipsnis, kuriame aprašyta ELIZA.
Atverti šaltinįColby ir kt. (1972), PARRY tyrimas
Originalus žurnalo „Artificial Intelligence“ straipsnis apie į Tiuringo testą panašius neatskiriamumo bandymus.
Atverti šaltinįStanfordo enciklopedija: Tiuringo testas
Mokslinė interpretacijų, prieštaravimų, variantų ir konkursų istorijos apžvalga.
Atverti šaltinįJonesas ir Bergenas (2024)
Iš anksto užregistruotas atsitiktinių imčių ELIZA, GPT-3.5, GPT-4 ir žmonių dalyvių tyrimas.
Atverti šaltinįWu, Wu ir Zhao (ACL 2025)
Recenzuotas darbas, siūlantis X-TURING ilgesniems dialogo agentų bandymams.
Atverti šaltinį