Microsoft CaptionBot bruker A.I. å identifisere bilder uten å gjøre Tays feil

Microsoft er fortsatt stolt av sin A.I.evner, selv om den siste chatteren sin, Tay, viste seg litt mer Hitler enn man ville håpe på i mann eller maskin. Så nå har selskapet rullet ut en A.I. captioning programvare som prøver å identifisere bilder i bilder. Bare last opp et bilde, og CaptionBot vil prøve å fortelle deg hva som er i bildet. Vi kan ikke stå for botens politikk, men bildeteknoteringsevnen virker ganske sterk.

Teknologien bruker ulike Microsoft-funksjoner for å bryte ned bildene. Computer Vision dissekerer de viktige elementene i et bilde. Emotion API bryter ansiktsuttrykk ned i emoji-kategorier, og Bing Image API identifiserer de gjenværende bildelementene. Deretter konfigurerer en naturlig språkprogramvare sine konklusjoner på enkel engelsk.

Nettstedet er best å identifisere bildene av kjendiser, mens flere abstrakte bilder har en tendens til å forvirre det. Man kan forvente at enkle husholdningsobjekter og symboler skal dominere, men antagelig når boten plukker ut et menneskelig ansikt fra et bilde, er det ikke så vanskelig å kjøre et omvendt Bing-bildesøk på det. Det må være millioner av bilder av Steph Curry på nettet, så denne muddlede IDen er bare delvis så imponerende som det ser ut til.

I våre tester kjempet bot også med bilder som inneholder flere elementer. Som i et bilde med en båt foran Frihetsgudinnen, tok algoritmen opp båten, ikke loven. Så det var ikke galt, men det var heller ikke riktig heller.

Generelt, men boten gjør en ganske god jobb med å dekke sine baser, sjelden slår ut helt.

Nettstedet nevner at det samler bildene og karakterene dine for å forbedre algoritmen, men det holder ikke på noen identifiserende informasjon. Det er bra, så Microsoft kan ikke si Tay på deg for å søke bilder av sine konkurrenter. Faktisk ser Microsoft ut til å spille det litt trygt med CaptionBot.

Så når du går inn i farlig territorium, slår CaptionBot bare ned. Uansett om det bare er et tilfeldighet eller en programmert reaksjon på Tays dårlige press, er det fortsatt å se, men CaptionBot vil helst ta en tid ut enn å spille spill med internett. Gi det en prøve her, men vær så snill. Hvis vi bryter en annen av Microsofts bots, kan selskapet kanskje ikke la oss få fine ting igjen.