Microsoft har lanserat ett bildigenkänningsverktyg som försöker beskriva innehållet i en bild. Detta verktyg för konstgjord intelligens är fortfarande i utvecklingsstadiet och lär ständigt av bilder som laddats upp av användare.

När det gäller noggrannhet är ibland beskrivningen ganska korrekt medan ibland CaptionBot erbjuder beskrivningar som inte har något att göra med vad som visas. Det finns också fall där appen inte kan ge en beskrivning alls, på grund av dess grova kring kanter.

Microsoft designade CaptionBot för att lära sig mer erfarenhet, med förväntan att dess bildtexter kommer att bli mer exakta med tiden. Ju fler bilder användarna laddar upp, desto bättre blir appen, eftersom CaptionBot beskriver sig själv:

Jag kan förstå innehållet i vilken bild som helst och jag ska försöka beskriva det såväl som varje människa. Jag lär mig fortfarande så jag kommer att hålla fast vid ditt foto men ingen personlig information.

CaptionBot använder tre tekniker för att beskriva vad som visas på en bild: Microsofts Computer Vision, Emotion och Bing Image. Computer Vision API extraherar rik information från bilder för att kategorisera och bearbeta visuella data tillsammans med att identifiera och extrahera text från en bild. Emotion API: n, som namnet antyder, analyserar ansikten för att upptäcka en rad känslor, allt från ilska, förakt, avsky, rädsla, lycka, neutralitet, sorg och överraskning. Bing Image söker på bilder efter bilder.

Vi testade CaptionBot och resultaten var korrekta i 50% av fallen. Till exempel laddade vi upp två bilder: den ena visar en spelmus och den andra en bunt med kort. I båda fallen föreslog verktyget att det var en mobiltelefon. Å andra sidan, CaptionBot upptäckte noggrant människor och ansikten.

Tydligen har CaptionBot en besatthet av mobiltelefoner. En Twitter-användare rapporterade att appen tyckte att Michelle Obama var en mobiltelefon. För fler bildtexter för roliga bildtexter, kolla in denna Twitter-sida.

Du kan också testa CaptionBot här. Försök: du antingen hjälper verktyget att förbättra eller så får du ett gott skratt!