InstructDiffusion je sposoban razumjeti semantička značenja i koristit će ih za uređivanje vaših slika.
- InstructDiffusion je umjetna inteligencija sposobna koristiti prethodne upute kako bi stekla sposobnost razumijevanja semantičkih značenja.
- Model također ima impresivne mogućnosti generalizacije.
- Nakon što nauči o vizualnom znaku, model će ga uvelike proširiti kako bi se još više uvježbao.
Najnoviji Microsoftov AI model, Instruct Diffusion, radikalno će transformirati vaše slike, ili bilo koju sliku koju možete učitati, prema vašim uputama. Model, koji je razvio Microsoft Research Asia, sučelje je koje spaja AI i ljudske upute za generiranje i dovršavanje raznih vizualnih zadataka.
Drugim riječima, vi odaberete sliku koju želite urediti, promijeniti ili transformirati, a InstructDiffusion će pokrenuti svoju računalnu viziju za promjenu slike na temelju vašeg unosa.
Microsoft je objavio papir za model prije nekoliko dana, a InstructDiffusion već ima demo igralište, gdje možete i sami isprobati model.
Ključna inovacija u IntructDiffusion je da modelu nije potrebno prethodno znanje o slici, već umjesto toga koristi proces difuzije za manipulaciju pikselima. Model ima puno korisnih značajki kao što su segmentacija, otkrivanje ključnih točaka i vraćanje. Praktično, InstructDiffusion će koristiti vaše upute za promjenu slike.
U jednom primjeru, Microsoft Research Asia uspio je ukloniti vodeni žig na fotografiji, jednostavno davši modelu upute da to učini.
Microsoftov InstructDiffusion može razlikovati značenje iza vaših uputa
InstructDiffusion, kao i mnogi drugi Microsoft AI modeli, sposoban je za inovativno ponašanje kada je u pitanju rješavanje zadataka. Microsoft Research Asia tvrdi da InstructDiffusion implementira zadatke razumijevanja i generativne zadatke.
Model će koristiti zadatke razumijevanja, kao što su segmentacija i otkrivanje ključnih točaka za lociranje područja i piksela koje želite da uredi.
Na primjer, model koristi segmentaciju kako bi uspješno locirao područje vaše sljedeće upute: obojite čovjeka s desne strane slike u crveno. Za otkrivanje ključnih točaka, uputa bi bila: žutom bojom okružite koljeno čovjeka na krajnjoj lijevoj strani slike.
Generativni zadaci sastoje se od redaktorskih i restauratorskih zadataka. Ne samo da će InstructDiffusion urediti vašu sliku, već će model također generirati nove elemente za sliku, na temelju vaših uputa.
Značajka programa Microsoft InstructDiffusion koja najviše obećava njegova je sposobnost da uspješno generalizira sve upute koje primi kako bi stvorio kohezivno i duboko razumijevanje značenja koje stoji iza njih. Drugim riječima, model će zapamtiti upute koje ste mu dali, te će ih uspješno koristiti za daljnje treniranje.
Ali model će također naučiti razlikovati značenja iza vaših uputa, što će ga dovesti do rješavanja neviđenih zadataka i osmišljavanja novih načina za generiranje elemenata. Ova sposobnost razumijevanja semantičkih značenja stavlja InstructDifussion korak dalje od drugih sličnih modela: nadmašuje ih.
Međutim, InstructDiffusion je i korak dalje do postizanja AGI: Duboko razumijevajući semantičko značenje koje stoji iza svake instrukcije i sposobnost uspješne generalizacije računalnih vizija, model će uvelike unaprijediti razvoj umjetne inteligencije.
Microsoft Research Asia omogućuje vam da ga isprobate u demo igralište, ali također možete koristiti njegov kod za treniranje vlastitog AI modela.
Koja su vaša mišljenja o ovom modelu? Hoćeš li probati?
