Georgia Tech Professor Brukt IBM Watson A.I. Som Online TA, lykkes lurte studenter

David Ferrucci: IBM Watson, Jeopardy & Deep Conversations with AI | Lex Fridman Podcast #44

David Ferrucci: IBM Watson, Jeopardy & Deep Conversations with AI | Lex Fridman Podcast #44
Anonim

Etter at roboter har oversvømmet arbeidsmarkedet, vil de eneste jobbene som er igjen for ekte mennesker være de som krever kritisk tenkning og menneskelig omsorg. Noe som en lærer på en høyskole, det kan absolutt aldri bli outsourcet til en maskin, ikke sant? Ikke sant?!

Ashok Goel, professor i databehandling ved Georgia Tech, implementerte en kunstig intelligensundervisningsassistent i nettbaserte spørsmål og svar for for et av sine kurs i fjor. Unge akademikere bråker ryggen i håp om en dag med en TA-jobb, vil bli bekymret for å lære at AI, kalt Jill, utførte så godt at de fleste av kursets studenter ikke kunne fortelle henne fra de andre åtte menneskelige TA som utførte samme plikter.

A.I.s fulle navn var Jill Watson, bygget fra den samme IBM Watson-plattformen som slo mennesker inn Jeopardy! over fem år siden, så det sier seg selv at hun var smart. Likevel, da Goel opprinnelig begynte å teste Jill med ekte studentspørsmål i januar, måtte han tråkke svarene til en privat del av klassens forum siden hun ikke var raffinert nok ved starten for å passere som en menneskelig TA.

"I utgangspunktet var svarene hennes ikke gode nok fordi hun ville bli sittende fast på søkeord," Lalith Polepeddi, en studenter som bidro til å bygge Jill, fortalte Georgia Tech Nyhetssenter. "For eksempel spurte en student om å organisere en møtet for å gå over video leksjoner med andre, og Jill ga et svar som refererte til en lærebok som kunne supplere video leksjonene - samme søkeord - men forskjellig sammenheng. Så vi lærte av feil som denne, og etter hvert gjorde Jill smartere."

Det var ikke før A.I. svaret riktig på 97 prosent av studentforespørsler som Goel og team lagde det i blandingen med de andre TA-ene. Den 26. april, da professoren informerte sin klasse om at Jill var en virtuell TA og ikke en ekte person, var studentresponsen "jevnt positiv", med minst en klasseskares sinn som ble "blåst", rapporterer universitetets nyhetsrapporter.

Siden dette kurset ved Georgia Tech (kunnskapsbasert kunstig intelligens) vanligvis tar i bruk 300 studenter som legger i gjennomsnitt 10.000 per semester, ble Jill delvis utviklet som et konsept og delvis som en reell kilde til arbeidstjeneste. Goel sier at A.I. vil returnere neste semester under et annet navn og med et mål å svare på 40 prosent av alle spørsmålene som er lagt inn i klassen fora.

Den beste indikatoren for suksess i Jill-prosjektet kunne ha vært at, i motsetning til en annen kvinnelig tema A.I. eksperimentere, så reiste hun ikke til slutt til et ekkokammer for bigoted hate speech. Vi gjetter det fordi hennes eneste samspill var med universitetsstuderende. Alle vet hvor solid pc dagens høyskoler har blitt.