*
 
AfterDawn: IT-alan uutiset

Kokeile vakuuttaako laajimman Turingin testin voittaneen botin keskustelutaidot

Kirjoittaja Manu Pitkänen (Google+) @ 26.6.2012 13:53 Kommentteja (17)

Kokeile vakuuttaako laajimman Turingin testin voittaneen botin keskustelutaidot Bletchley Parkissa, Britanniassa, järjestettiin Alan Turingin syntymäpäivän kunniaksi laajin Turingin testi koskaan. Testissä mitattiin eri bottien tekoälyn tasoa, eli sitä kuinka realistiseen keskusteluun ne kykenevät ihmisten kanssa.
Testissä käytiin 150 keskustelua ja keskustelijoita oli 30 (25 ihmistä, viisi tietokoneohjelmaa). Ihmiset kävivät tekstipohjaista keskustelua sekä toisten ihmisten että tietokoneohjelmien kanssa. Keskustelijat eivät tienneet etukäteen kenen kanssa he vaihtoivat ajatuksia.

Alan Turing ennusti, että vuoteen 2000 mennessä tietokoneet kykenevät huijaamaan 30 prosenttia ihmistuomareista luulemaan keskustelukumppanin olevan ihminen (keskusteluaika viisi minuuttia). Nyt suoritetussa kokeessa voittajaksi selviytynyt 13-vuotiasta poikaa esittänyt Eugene Goostman -botti pääsi 29 prosenttiin. Cleverbot selviytyi kolmanneksi ja JFred toiseksi. Testi suoritettiin myös Ultra Halilla ja Elbotilla.

Eugene Goostmanin keskustelutaitoja voi käydä testaamassa täällä.

Edellinen Seuraava  

17 kommenttia

126.6.2012 14:16

Lainaus, alkuperäisen viestin kirjoitti FrankBasillon:
Itselleni tuo botti ei vastannut YHTEENKÄÄN kysymykseen järkevästi, lukuunottamatta kysymyksiin "how are you" ja "how old are you".
Miten tuo eroaa normaalista 13-vuotiaasta? :)

226.6.2012 14:26

teppol:
Käyppä kokeilemassa, niin selviää.

326.6.2012 14:34

Itse koin noista kolmesta tuon Cleverbotin uskottavimmaksi.

426.6.2012 15:10

Minusta botti kuulosti 13-vuotiaalta ja osasi aika moneen kysymykseeni vastata. Oikeastaan välillä tuntui kuin olisi oikean kanssa jutellut. Muutamaan kysymykseeni tuli aika mitä sattuu vastauksia, mutta jos kerran botti on 13-vuotias niin mielestäni aika onnistunut, jos ymmärsitte mitä meinaan. Botti osasi jopa sarkasmia, joka mielestäni aika uusi asia ja muutenkin tuli ihan uutta kokemusta.

Viestiä on muokattu sen lähettämisen jälkeen. Viestiä on muokattu viimeksi 26.6.2012 @ 15:13

AMD A6-3400M Quad-core 1,40 Ghz
Muisti (RAM) - DDR3 1333Mhz 8,00Gt
Sisäinen kiintolevyasema - 750Gt
Näyttösovitin - AMD Radeon HD 6520G2
näytönohjain - RAM-näyttömuisti - 2x512Mt
USB 3.0 Windows 7

526.6.2012 15:31

Kävi varmaan huono tuuri kaikkien kolmen koittamani kanssa, mutta kaikilta hävisi "keskustelun" konteksti noin kysymyksessä tai kahdessa ja sitten ei tullut kuin satunnaisia lauseita. Ei oikein vakuuttanut, mutta ehkäpä koitan illalla uudestaan.

[edit]Koitin sitten tuota voittajabottia kuitenkin heti uudestaan. Kertoi olevansa Ukrainasta ja kysyi mistä minä olen. Vastasin että Kiovasta, sitä botti ei osannut sijoittaa omaan maahansa ja sekosi. :) Konteksti ja paikallistuntemus ovat selvästi asioita joita siinä pitäisi parantaa ja paljon.

Ja kyllä, tuo eroaa selvästi huonompaan suuntaan ainakin omista sisaruksistani, jotka olivat suunnilleen tuossa iässä jokunen vuosi sitten.

Viestiä on muokattu sen lähettämisen jälkeen. Viestiä on muokattu viimeksi 26.6.2012 @ 15:37

626.6.2012 15:35

Aika härö kolmetoista vuotiaaksi kun lähti yhtäkkiä ehdottelemaan "sex-via-internet":ia. tainnut tuokin penska liikkua pikkasen internetissä...

726.6.2012 16:23

En sitten tiedä muista, mutta ei se nyt mikää kauhee älykkö ole =P

826.6.2012 17:42

Minulle vastasi järkevästi moneen kysymykseen, mutta en odottanutkaan, että olisi kaikkea ymmärtänyt. Jopa väänsi pari vitsiäkin. Sen verran sain voittajabotista tietoa, että asuu Ukrainassa ja että pitää kovasti Need for Speedistä, harmiksi ei kuitenkaan ollut kuullutkaan koko battlefield -pelisarjasta.



926.6.2012 18:56

Juu no pistin 3+7=, niin vastasi jotain täysin epämääräistä. Kysyin mitä et ymmärtänyt, niin tämä kysyy missä asun. Vastaan ja esitän lisäkysymyksen, että missä hän asuu tähänkään ei tule vastausta joten luovutan.

1026.6.2012 19:10

Lainaus, alkuperäisen viestin kirjoitti Pukli:
Juu no pistin 3+7=, niin vastasi jotain täysin epämääräistä. Kysyin mitä et ymmärtänyt, niin tämä kysyy missä asun. Vastaan ja esitän lisäkysymyksen, että missä hän asuu tähänkään ei tule vastausta joten luovutan.
Kirjoitathan varmasti oikein? :D Yleensähän näissä tulee sekaannukset juuri siinä vaiheessa että joku kirjoittaa väärin tai jotain slangia.

1126.6.2012 19:20

Lainaus, alkuperäisen viestin kirjoitti Ibanez90:
Lainaus, alkuperäisen viestin kirjoitti Pukli:
Juu no pistin 3+7=, niin vastasi jotain täysin epämääräistä. Kysyin mitä et ymmärtänyt, niin tämä kysyy missä asun. Vastaan ja esitän lisäkysymyksen, että missä hän asuu tähänkään ei tule vastausta joten luovutan.
Kirjoitathan varmasti oikein? :D Yleensähän näissä tulee sekaannukset juuri siinä vaiheessa että joku kirjoittaa väärin tai jotain slangia.
Eikös 13-vuotiaat yleensä kirjota netissä aika epäselvää tekstiä? Että pitäis ymmärtää ton botinki ;)

1226.6.2012 19:39

Mä keskustelin pitkät tovit, sen kotiomaasta, kielistä, venäläisistä, mun työstä, sen isoäidistä ja vaikkqa mistä, joskus vähän eksy aiheesta ja heitti sarkasmia =) Meinasin jo unohtaa ajantajun.

1326.6.2012 19:39

Kirjoitin ''Everythibg goes like shit.''
Vastaus ''Why does everything taste like chicken?''

Ei huonoa englantia osaa, joten erottaa heti ihmisestä.

Lorkpitusvirhe korjattuna sama:

''Everything goes like shit.''
''You believe?''

Viestiä on muokattu sen lähettämisen jälkeen. Viestiä on muokattu viimeksi 26.6.2012 @ 19:41

1426.6.2012 22:25

Lainaus, alkuperäisen viestin kirjoitti ArttuH5N1:
Itse koin noista kolmesta tuon Cleverbotin uskottavimmaksi.
Minustakin cleverbot oli uskottavampi kuin tuo eugene. Mutta molemmissa vielä paljon kehitettävää. :)

"Jos se ei ole rikki, korjaan sitä kunnes se on"

1527.6.2012 2:18

Cleverbot oli erittäin uskottava, luulin että siellä oli ihminen. :)

1627.6.2012 18:15

Liian hyvä kielioppi ja ei kukaan oikeasti vastaisi noin nopeasti..
Pitäis lukee hetken teksti että kirjoittaa vastausta niin vois ehkä joillekin mennä läpi.

Vähän kokeilin mutta ei huono kuitenkaan.

173.7.2012 21:59

Vähän aikaa juteltuani laitoin vain vastauksen "yes", että onko suomi EU maa jolloin OT:nä botti heitti:

"I'm with you! I'd like to be judge next year, it's so funny to "test" people:-)"

:)

Toinen hauska kun se pyysi kertomaan millaista on olla ohjelmoija ja vastasin "It's kinda like playing a god":

"Oh, I believe in virtual nature of our world, existing inside the Original Computer, Crayegovah. This computer was created by the Sacred Spirit of Alan Turing, to provide His coming to Earth in human-being incarnation."

Viestiä on muokattu sen lähettämisen jälkeen. Viestiä on muokattu viimeksi 3.7.2012 @ 22:02

Peace & Love, Sir Robin * http://kapsi.fi/~robsku/ - HackNBlog
* ZTE Blade: My first android computer. Old, so? No slide-out keyboard nor stylus :(
* Amilo laptop: Pentium Dual CPU T2390 @ 1.86GHz, 1MB Cache, RAM: 3GB, HDD: 120GB (not original), AMD/ATI Mobility Radeon HD 2400. Linux Mint Debian Edition.
...sen tarvi olla niin justiinsa

Tämän uutisen kommentointi ei ole enää mahdollista.

Tuoreimmat uutiset

Tankkipelin kehittäjä osti suomalaisen pelistartupin Tankkipelin kehittäjä osti suomalaisen pelistartupin (2.12.2016 13:01)
PC-pelikehittäjät ovat viime aikoina laajentuneet mobiilipelimarkkinoille ostamalla sektorilla jo markkinaosuuksia kahmineita yrityksiä. Esimerkiksi Activision Blizzard osti Candy Crush -pelejä ....
Omistatko Huawein puhelimen? Tarkista saatko Android Nougat -päivityksen Omistatko Huawein puhelimen? Tarkista saatko Android Nougat -päivityksen (2.12.2016 12:26)
Huawei aikoo päivittää ensi vuoden alussa kaikkiaan kuusi puhelinmallia Android 7.0 Nougatiin. Näin kertovat HDBlog.it- ja Android Central -sivustot, jotka eivät kuitenkaan paljasta tietojensa lähdettä. ....
Pelaajat poikkeavat massasta – Joka toinen päivittänyt Windows 10:een Pelaajat poikkeavat massasta – Joka toinen päivittänyt Windows 10:een (2.12.2016 11:16)
Steamin marraskuisten tilastotietojen mukaan lähes puolet pelaajista on siirtynyt Windows 10:een. Satunnaisotantaan perustuvien lukemien mukaan 48,37 prosenttia PC-pelaajista käyttää 64-bittistä ....
2 kommenttia
Älykaiuttimet tulevat – Amazon ja Intel sopivat yhteistyöstä Älykaiuttimet tulevat – Amazon ja Intel sopivat yhteistyöstä (2.12.2016 10:53)
Vielä pari vuotta sitten Internet of Things oli hyvin epämääräinen käsite, jota käytettiin lähes kaikissa pöhinäpuheissa, mutta kukaan ei oikein tuntunut käsittävän mitä se käytännössä oikein ....
Lumioista tuttu ominaisuus tulossa Androidille – MediaTek esitteli uudet piirit Lumioista tuttu ominaisuus tulossa Androidille – MediaTek esitteli uudet piirit (2.12.2016 10:32)
Taiwanilainen mobiilipiirikehittäjä MediaTek on esitellyt kaksi uutta suorituskykyisiin älypuhelimiin suunnattua järjestelmäpiiriä. Helio X23 ja Helio X27 ovat muun Helio X20 -malliston mukaisesti ....

Uutisarkisto