Turing-test
Lyder menneskelig er ikke det samme som at forstå, det er Turing-testens pointe.
Indhold
Turing-test er en skriftlig prøve foreslået af Alan Turing i 1950: en dommer fører en tekstsamtale med en maskine og et menneske uden at se dem, og skal gætte hvem der er hvem. Hvis maskinen får dommeren til at tro, den er et menneske, siger testen at maskinen har bestået imitationen.
Sådan virker Turing-test i praksis
I Turing-testen kommunikerer parterne udelukkende via tekst. Dommeren stiller spørgsmål, får svar, og vurderer hvem der virker mest menneskelig. I dag svarer moderne chatbots ofte i korte, velstyrede udvekslinger, og i sådan en ramme kan de ofte give indtryk af at være mennesker. Det er vigtigt at se Turing-testen som en test af efterligning, hvor godt en maskine kan lyde menneskelig, ikke som en test af forståelse eller faktuel korrekthed. En hverdagsanalog: en skuespiller kan fremføre replikker, så publikum tror på karakteren. Det betyder ikke, at skuespilleren deler karakterens viden eller holdninger.
Hvorfor Turing-testen ofte misforstås
Mange tror, at hvis en chatbot "består" Turing-testen, så er den intelligent på samme måde som et menneske. Det er forkert. Moderne AI bygger ofte på maskinlæring og neurale netværk, som genkender mønstre i tekst og producerer sandsynlige svar. De kan altså efterligne måder at udtrykke sig på uden at have en intern forståelse af verden. Derfor er Turing-testens historiske værdi stor, den satte fokus på kommunikation som mål, men i praksis er den et dårligt krav, hvis du skal vurdere om en løsning forstår fagsprog, leverer korrekte facts eller overholder regler.
Eksempel: Indkøber vurderer en chatbot efter en uge
En indkøber i en mellemstor virksomhed får en uges proof-of-concept med et chatbot-system, der skal hjælpe kundeservice. Mandag morgen kigger hun på 200 chats fra testen: mange svar lyder venlige og menneskelige, og nogle kunder satte ikke spørgsmålstegn ved formuleringen. Men ved gennemgangen opdagede hun også fem gange, hvor chatbotten gav upræcise prisoplysninger fra en gammel prisliste og to gange et fejlagtigt juridisk svar fra en PDF, der lå i virksomhedens arkiv. Kollegiet var imponeret over tonen, men bekymret over rigtigheden. Indkøberen brugte to arbejdsdage på at kortlægge, hvornår chatbotten "lyder godt" versus hvornår den fejler i indhold. Læringen var klar: en test der kun måler menneskelighed hjælper ikke, når opgaven kræver korrekte svar.
Turing-test er ikke det samme som forståelse, maskinlæring eller etik
Turing-testen måler imitation, ikke forståelse. AI (kunstig intelligens) er et bredt felt, maskinlæring er den teknik, mange moderne modeller bruger, og et neuralt netværk er en modelarkitektur, der kan generere menneskelignende tekst. At en model "lyder" menneskelig betyder ikke, at dens svar er dokumenterede, juridisk korrekte eller etisk forsvarlige. Når du vurderer en løsning, skal du derfor se på andre mål: faktuel nøjagtighed, robusthed over for forkerte input, sporbarhed af hvor svarene kommer fra og hvordan modellen håndteres over tid.
Skal flere end én i huset kunne noget med turing-test, så se, hvordan en AI-workshop er skruet sammen. Vil I have et bud på, om turing-test overhovedet er jeres næste skridt, så er det dét, AI-rådgivning er til for.
Ofte stillede spørgsmål om Turing-test
Er Turing-test det samme som at AI forstår?
Nej. Turing-testen undersøger, om en maskine kan efterligne menneskelig samtale i tekst. Det viser ikke, om maskinen rent faktisk forstår indholdet eller har korrekt viden.
Har nogen AI bestået Turing-testen?
Der har været eksperimenter, hvor chatbots i korte, kontrollerede samtaler har vildledt mennesker. Det er dog ikke et entydigt bevis på generel intelligens, og derfor betragtes testen i dag som et utilstrækkeligt mål.
Kan jeg bruge Turing-testen som krav, når jeg køber en chatbot?
Det anbefales ikke. Bed i stedet om konkrete krav: korrekthed, genkendelse af fagsprog, logging af kilder og håndtering af usikre svar. Menneskelighed i tonen må ikke være eneste succeskriterium.
Hvad er forskellen på Turing-testen og maskinlæring?
Turing-testen er en metode til at vurdere efterligning i samtale. Maskinlæring er den teknik, mange chatbots bruger for at generere svar. Maskinlæring kan hjælpe en bot til at lyde menneskelig, men det dokumenterer ikke forståelse eller rigtighed.
AI-rådgiver og underviser, grundlægger af AI Hero i Herning. Har bygget digitalt i over 20 år og hjælper danske virksomheder med at få AI i drift. Læs mere om Brian.