Microsofts CaptionBot beskriver billeder, så du ikke behøver

Microsoft har lanceret et billedgenkendelsesværktøj, der forsøger at beskrive indholdet af et billede. Dette værktøj til kunstig intelligens er stadig i udviklingsfasen og lærer konstant af billeder uploadet af brugerne.

For så vidt angår nøjagtighed er beskrivelsen undertiden ret nøjagtig, mens CaptionBot undertiden tilbyder beskrivelser, der ikke har noget at gøre med det, der vises. Der er også tilfælde, hvor appen overhovedet ikke kan give en beskrivelse på grund af dens uslebne tilstand.

Microsoft designet CaptionBot til at lære med mere erfaring med forventning om, at dens billedtekster bliver mere præcise over tid. Jo flere billeder brugere uploader, jo bedre bliver appen, som CaptionBot beskriver sig selv:

Jeg kan forstå indholdet af ethvert billede, og jeg vil prøve at beskrive det såvel som ethvert menneske. Jeg lærer stadig, så jeg holder fast i dit foto, men ingen personlige oplysninger.

CaptionBot bruger tre teknologier til at beskrive, hvad der vises i et billede: Microsofts Computer Vision, Emotion og Bing Image.

Computer Vision API udtrækker rig information fra billeder for at kategorisere og behandle visuelle data sammen med at identificere og udtrække tekst fra et billede. Det Emotion API, som navnet antyder, analyser ansigter for at opdage en række følelser, alt fra vrede, foragt, afsky, frygt, lykke, neutralitet, tristhed og overraskelse. Bing-billede søger på nettet efter billeder.

Vi testede CaptionBot, og resultaterne var nøjagtige i 50% af tilfældene. For eksempel uploadede vi to billeder: det ene viser en spilmus og det andet en stak kort. I begge tilfælde foreslog værktøjet, at det var en mobiltelefon. På den anden side registrerede CaptionBot nøjagtigt mennesker og ansigter.

Tilsyneladende har CaptionBot en besættelse af mobiltelefoner. En Twitter-bruger rapporterede, at appen troede, at Michelle Obama var en mobiltelefon. For flere CaptionBot sjove billedtekster, se denne Twitter-side.

Du kan også teste CaptionBot her. Prøv det: Du hjælper enten med at forbedre værktøjet, eller du griner godt!

RELATEREDE HISTORIER, DU SKAL KONTROLLERE:

  • Byg 2016: Microsoft planlægger at demonstrere smarte AI-bots
  • Cortana får mange forbedringer i Windows 10: her er de
  • Microsoft lader dig søge på nettet med Skype-bots
  • Bots er fremtiden, og Microsoft er ombord [Build 2016]
Microsoft træner AI-agenter til mere realistisk spil

Microsoft træner AI-agenter til mere realistisk spilMicrosoft Kunstig Intelligens

Når du spiller et spil mod en maskine, vil du have hårde modstandere, der kan udfordre dig, og det er her AI træder ind.Et Microsoft-forskningsprojekt sigter nu mod at forbedre AI-agenter i den mod...

Læs mere