Kokeile vakuuttaako laajimman Turingin testin voittaneen botin keskustelutaidot
Bletchley Parkissa, Britanniassa, järjestettiin Alan Turingin syntymäpäivän kunniaksi laajin Turingin testi koskaan. Testissä mitattiin eri bottien tekoälyn tasoa, eli sitä kuinka realistiseen keskusteluun ne kykenevät ihmisten kanssa.
Testissä käytiin 150 keskustelua ja keskustelijoita oli 30 (25 ihmistä, viisi tietokoneohjelmaa). Ihmiset kävivät tekstipohjaista keskustelua sekä toisten ihmisten että tietokoneohjelmien kanssa. Keskustelijat eivät tienneet etukäteen kenen kanssa he vaihtoivat ajatuksia.
Alan Turing ennusti, että vuoteen 2000 mennessä tietokoneet kykenevät huijaamaan 30 prosenttia ihmistuomareista luulemaan keskustelukumppanin olevan ihminen (keskusteluaika viisi minuuttia). Nyt suoritetussa kokeessa voittajaksi selviytynyt 13-vuotiasta poikaa esittänyt Eugene Goostman -botti pääsi 29 prosenttiin. Cleverbot selviytyi kolmanneksi ja JFred toiseksi. Testi suoritettiin myös Ultra Halilla ja Elbotilla.
Eugene Goostmanin keskustelutaitoja voi käydä testaamassa täällä.
17 KOMMENTTIA
teppoI1/17
Miten tuo eroaa normaalista 13-vuotiaasta? :)
matpaa2/17
teppol:
Käyppä kokeilemassa, niin selviää.
ArttuH5N13/17
Itse koin noista kolmesta tuon Cleverbotin uskottavimmaksi.
Aras884/17
Minusta botti kuulosti 13-vuotiaalta ja osasi aika moneen kysymykseeni vastata. Oikeastaan välillä tuntui kuin olisi oikean kanssa jutellut. Muutamaan kysymykseeni tuli aika mitä sattuu vastauksia, mutta jos kerran botti on 13-vuotias niin mielestäni aika onnistunut, jos ymmärsitte mitä meinaan. Botti osasi jopa sarkasmia, joka mielestäni aika uusi asia ja muutenkin tuli ihan uutta kokemusta.
Jonahan5/17
Kävi varmaan huono tuuri kaikkien kolmen koittamani kanssa, mutta kaikilta hävisi "keskustelun" konteksti noin kysymyksessä tai kahdessa ja sitten ei tullut kuin satunnaisia lauseita. Ei oikein vakuuttanut, mutta ehkäpä koitan illalla uudestaan.
[edit]Koitin sitten tuota voittajabottia kuitenkin heti uudestaan. Kertoi olevansa Ukrainasta ja kysyi mistä minä olen. Vastasin että Kiovasta, sitä botti ei osannut sijoittaa omaan maahansa ja sekosi. :) Konteksti ja paikallistuntemus ovat selvästi asioita joita siinä pitäisi parantaa ja paljon.
Ja kyllä, tuo eroaa selvästi huonompaan suuntaan ainakin omista sisaruksistani, jotka olivat suunnilleen tuossa iässä jokunen vuosi sitten.
Teknotuuletin6/17
Aika härö kolmetoista vuotiaaksi kun lähti yhtäkkiä ehdottelemaan "sex-via-internet":ia. tainnut tuokin penska liikkua pikkasen internetissä...
G0lden_Kebab7/17
En sitten tiedä muista, mutta ei se nyt mikää kauhee älykkö ole =P
Xtrim8/17
Minulle vastasi järkevästi moneen kysymykseen, mutta en odottanutkaan, että olisi kaikkea ymmärtänyt. Jopa väänsi pari vitsiäkin. Sen verran sain voittajabotista tietoa, että asuu Ukrainassa ja että pitää kovasti Need for Speedistä, harmiksi ei kuitenkaan ollut kuullutkaan koko battlefield -pelisarjasta.
Pukli9/17
Juu no pistin 3+7=, niin vastasi jotain täysin epämääräistä. Kysyin mitä et ymmärtänyt, niin tämä kysyy missä asun. Vastaan ja esitän lisäkysymyksen, että missä hän asuu tähänkään ei tule vastausta joten luovutan.
Ibanez9010/17
Kirjoitathan varmasti oikein? :D Yleensähän näissä tulee sekaannukset juuri siinä vaiheessa että joku kirjoittaa väärin tai jotain slangia.
ArttuH5N111/17
Eikös 13-vuotiaat yleensä kirjota netissä aika epäselvää tekstiä? Että pitäis ymmärtää ton botinki ;)
PJL7812/17
Mä keskustelin pitkät tovit, sen kotiomaasta, kielistä, venäläisistä, mun työstä, sen isoäidistä ja vaikkqa mistä, joskus vähän eksy aiheesta ja heitti sarkasmia =) Meinasin jo unohtaa ajantajun.
zipzap13/17
Kirjoitin ''Everythibg goes like shit.''
Vastaus ''Why does everything taste like chicken?''
Ei huonoa englantia osaa, joten erottaa heti ihmisestä.
Lorkpitusvirhe korjattuna sama:
''Everything goes like shit.''
''You believe?''
DjZorlag14/17
Minustakin cleverbot oli uskottavampi kuin tuo eugene. Mutta molemmissa vielä paljon kehitettävää. :)
Labratoria15/17
Cleverbot oli erittäin uskottava, luulin että siellä oli ihminen. :)
tonttila16/17
Liian hyvä kielioppi ja ei kukaan oikeasti vastaisi noin nopeasti..
Pitäis lukee hetken teksti että kirjoittaa vastausta niin vois ehkä joillekin mennä läpi.
Vähän kokeilin mutta ei huono kuitenkaan.
robsku17/17
Vähän aikaa juteltuani laitoin vain vastauksen "yes", että onko suomi EU maa jolloin OT:nä botti heitti:
"I'm with you! I'd like to be judge next year, it's so funny to "test" people:-)"
:)
Toinen hauska kun se pyysi kertomaan millaista on olla ohjelmoija ja vastasin "It's kinda like playing a god":
"Oh, I believe in virtual nature of our world, existing inside the Original Computer, Crayegovah. This computer was created by the Sacred Spirit of Alan Turing, to provide His coming to Earth in human-being incarnation."
TÄMÄN UUTISEN KOMMENTOINTI ON PÄÄTTYNYT