Shepherd yra šaunus DI modelis kambaryje, nurodantis jūsų AI modelio klaidas.
- Shepherd AI buvo apmokytas bendruomenės atsiliepimų, ypač Reddit forumų.
- Modelis taip pat buvo apmokytas pagal kuruojamą žmogaus anotuotą įvestį, todėl jo pataisymai yra faktiniai.
- Aviganis, norėdamas pateikti savo atsiliepimus, naudoja natūralų balsą.
Atėjo laikas žengti žingsnį atgal nuo uždengimo „Microsoft“ AI laimėjimai, norėdami pažvelgti į vieną iš modelių, prie kurių dirbo neseniai jos partnerė Meta.
„Facebook“ bendrovė taip pat pati finansavo AI tyrimus, o rezultatas yra AI modelis kuri gali pataisyti didelių kalbų modelius (LLM) ir nukreipti juos į teisingą atsakymus.
Projekto komanda įtaigiai pavadino modelį Ganytojas AI, o modelis sukurtas siekiant pašalinti klaidas, kurias LLM gali padaryti, kai jų prašoma atlikti tam tikras užduotis.
Šiame darbe pristatome Shepherd – kalbos modelį, specialiai pritaikytą kritikuoti modelio atsakymus ir siūlyti patobulinimai, viršijantys nesuderinto modelio galimybes nustatyti įvairias klaidas ir teikti pasiūlymus juos ištaisyti. Mūsų požiūrio esmė yra aukštos kokybės grįžtamojo ryšio duomenų rinkinys, kurį renkame iš bendruomenės atsiliepimų ir žmonių komentarų.
Meta AI tyrimai, FAIR
Kaip galbūt žinote, „Meta“ prieš kelias savaites išleido savo LLM, „Llama 2“, bendradarbiaudama su „Microsoft“. Llama 2 yra stulbinantis 70B parametrų atvirojo kodo modelis „Microsoft“ ir „Meta“ planuoja komercializuoti vartotojams ir organizacijoms, kad sukurtų savo vidinius AI įrankius.
Tačiau AI dar nėra tobulas. Ir daugelis jos sprendimų ne visada atrodo teisinga. Pasak „Meta AI Research“, Shepherdas yra čia, kad išspręstų šias problemas, jas ištaisydamas ir siūlydamas sprendimus.
Shepherd AI yra neformalus, natūralus AI mokytojas
Visi žinome, kad, pavyzdžiui, „Bing Chat“ turi laikytis tam tikrų modelių: įrankis gali būti kūrybingas, bet taip pat gali apriboti jo kūrybiškumą. Kalbant apie profesinius dalykus, „Bing AI“ taip pat gali turėti rimtą požiūrį.
Tačiau atrodo, kad Meta's Shepherd AI dirba kaip neformalus AI mokytojas kitiems LLM. Modelis, kuris yra žymiai mažesnis 7B parametrais, turi natūralų ir neformalų balso toną, kai taiso ir siūlo sprendimus.
Visa tai buvo įmanoma dėl įvairių mokymo šaltinių, įskaitant:
- Bendruomenės atsiliepimai: „Shepherd AI“ buvo apmokytas kuruojamo turinio iš internetinių forumų (konkrečiai „Reddit“ forumų), kuris suteikia galimybę natūraliai įvesti.
- Žmogaus anotuota įvestis: Shepherd AI taip pat buvo apmokytas naudoti pasirinktų viešųjų duomenų bazių rinkinį, kuris leidžia organizuoti ir faktiškai taisyti.
Šie du metodai leidžia Shepherd AI pasiūlyti tikrus, patvirtintus sprendimus labai neformaliu tonu, todėl tai yra geriausias pasirinkimas tiems, kurie nori išbandyti ir taisyti draugiškesnį AI modelį jūsų AI.
Nepaisant santykinai mažos infrastruktūros, „Shepherd AI“ puikiai gali pateikti geresnį faktų pataisymą nei, pavyzdžiui, „ChatGPT“. FAIR ir „Meta AI Research“ nustatė, kad AI įrankis suteikia geresnių rezultatų nei dauguma konkurentų alternatyvų, o vidutinis laimėjimo rodiklis laimėjimų rodiklis 53–87 %. Be to, „Shepherd AI“ taip pat gali tiksliai nuspręsti dėl bet kokio LLM sukurto turinio.
Šiuo metu „Shepherd“ yra naujas dirbtinio intelekto modelis, tačiau, kai bus atlikta daugiau tyrimų, modelis greičiausiai bus išleistas ateityje, kaip atvirojo kodo projektas.
Ar jus tai jaudina? Ar naudotumėte jį savo AI modeliui pataisyti? Ką jūs manote apie tai?
