Microsofts CaptionBot beskriver bilder slik at du ikke trenger å gjøre det

Microsoft har lansert et bildegjenkjenningsverktøy som prøver å beskrive innholdet i et bilde. Dette kunstige intelligensverktøyet er fortsatt i utviklingsfasen og lærer stadig av bilder lastet opp av brukere.

Når det gjelder nøyaktighet, er beskrivelsen noen ganger ganske nøyaktig, mens CaptionBot noen ganger tilbyr beskrivelser som ikke har noe å gjøre med det som blir avbildet. Det er også tilfeller der appen ikke kan gi en beskrivelse i det hele tatt på grunn av dens grove-rundt-kant-tilstand.

Microsoft designet CaptionBot for å lære med mer erfaring, med forventning om at billedtekstene vil bli mer nøyaktige over tid. Jo flere bilder brukere laster opp, jo bedre blir appen, som CaptionBot beskriver seg selv:

Jeg kan forstå innholdet i hvilket som helst bilde, og jeg vil prøve å beskrive det så vel som ethvert menneske. Jeg lærer fremdeles, så jeg holder på bildet ditt, men ingen personlig informasjon.

CaptionBot bruker tre teknologier for å beskrive det som er avbildet i et bilde: Microsofts Computer Vision, Emotion og Bing Image.

Computer Vision API trekker ut rik informasjon fra bilder for å kategorisere og behandle visuelle data sammen med å identifisere og trekke ut tekst fra et bilde. De Emotion API, som navnet antyder, analyser ansikter for å oppdage en rekke følelser, alt fra sinne, forakt, avsky, frykt, lykke, nøytralitet, tristhet og overraskelse. Bing-bilde søker på nettet etter bilder.

Vi testet CaptionBot og resultatene var nøyaktige i 50% av tilfellene. For eksempel lastet vi opp to bilder: det ene viser en spillmus, det andre en kortbunke. I begge tilfeller antydet verktøyet at det var en mobiltelefon. På den annen side oppdaget CaptionBot mennesker og ansikter nøyaktig.

Tilsynelatende har CaptionBot en besettelse med mobiltelefoner. En Twitter-bruker rapporterte at appen trodde Michelle Obama var en mobiltelefon. For mer CaptionBot morsomme bildetekster, sjekk ut denne Twitter-siden.

Du kan også teste CaptionBot her. Prøv det: Du vil enten hjelpe verktøyet med å bli bedre, eller du vil le godt!

RELATERTE STORIER DU TRENGER Å KONTROLLERE:

  • Bygg 2016: Microsoft planlegger å demonstrere smarte AI-bots
  • Cortana får mange forbedringer i Windows 10: her er de
  • Microsoft lar deg søke på nettet med Skype-bots
  • Bots er fremtiden og Microsoft er ombord [Bygg 2016]
Microsofts Fetch! app gjenkjenner hunder og klassifiserer dem etter rase

Microsofts Fetch! app gjenkjenner hunder og klassifiserer dem etter raseMicrosoft Kunstig IntelligensWindows 10 Apper

Har du noen gang fått en vakker hund til å fange oppmerksomheten din mens du ruslet gjennom parken? Du spurte sannsynligvis umiddelbart hvilken rase det var. Microsoft gjør det veldig enkelt å svar...

Les mer
Microsoft trener AI-agenter for mer realistisk spill

Microsoft trener AI-agenter for mer realistisk spillMicrosoft Kunstig Intelligens

Når du spiller et spill mot en maskin, vil du ha tøffe motstandere som kan utfordre deg, og det er der AI trer inn.Et Microsoft-forskningsprosjekt tar nå sikte på å forbedre AI-agenter i motsatt re...

Les mer