Gembala adalah model AI keren di ruangan, menunjukkan kesalahan model AI Anda.
- Gembala AI dilatih tentang umpan balik Komunitas, khususnya forum Reddit.
- Model ini juga dilatih tentang input beranotasi manusia yang dikuratori, yang membuat koreksinya menjadi faktual.
- Gembala menggunakan suara alami untuk memberikan umpan baliknya.
Sudah waktunya untuk mengambil langkah mundur dari menutupi Terobosan AI Microsoft, untuk melihat salah satu model yang sedang dikerjakan oleh mitra terbarunya, Meta.
Perusahaan Facebook telah mendanai penelitian tentang AI sendiri, dan hasilnya adalah model AI yang mampu mengoreksi model bahasa besar (LLM) dan membimbing mereka untuk menyediakan yang benar tanggapan.
Tim di belakang proyek secara sugestif memanggil model tersebut Gembala AI, dan model dibangun untuk mengatasi kesalahan yang dapat dilakukan LLM saat diminta menyelesaikan tugas tertentu.
Dalam karya ini, kami memperkenalkan Shepherd, sebuah model bahasa yang secara khusus disesuaikan dengan tanggapan dan saran model kritik penyempurnaan, melampaui kemampuan model yang tidak disetel untuk mengidentifikasi beragam kesalahan dan memberikan saran kepada menyembuhkan mereka. Inti dari pendekatan kami adalah kumpulan data umpan balik berkualitas tinggi, yang kami kurasi dari umpan balik komunitas dan anotasi manusia.
Penelitian Meta AI, FAIR
Seperti yang mungkin Anda ketahui, Meta merilis LLM-nya, Llama 2, bekerja sama dengan Microsoft, beberapa minggu lalu. Llama 2 adalah model sumber terbuka parameter 70B yang menakjubkan bahwa Microsoft dan Meta berencana untuk mengkomersialkan kepada pengguna dan organisasi untuk membangun alat AI internal mereka.
Tapi AI belum sempurna. Dan banyak solusinya sepertinya tidak selalu benar. Shepherd ada di sini untuk mengatasi masalah ini dengan memperbaikinya dan menyarankan solusi, menurut Meta AI Research.
Shepherd AI adalah guru AI alami yang informal
Kita semua tahu Bing Chat, misalnya, cenderung harus mengikuti beberapa pola: alatnya bisa kreatif, tapi bisa juga membatasi kreativitasnya. Dalam hal profesional, Bing AI juga dapat mengambil sikap serius.
Namun, tampaknya AI Gembala Meta bekerja sebagai guru AI informal untuk LLM lainnya. Modelnya, yaitu jauh lebih kecil pada parameter 7B, memiliki nada suara yang alami dan informal saat mengoreksi dan menyarankan solusi.
Ini semua dimungkinkan berkat berbagai sumber untuk pelatihan, termasuk:
- Umpan balik komunitas: Shepherd AI dilatih tentang konten yang dikuratori dari forum online (forum Reddit, khususnya), yang memungkinkan input alaminya.
- Input yang dianotasi manusia: Shepherd AI juga dilatih pada serangkaian database publik terpilih, yang memungkinkan koreksi terorganisir dan faktualnya.
Kedua metode ini memungkinkan Shepherd AI menawarkan solusi yang nyata dan tervalidasi dengan nada yang sangat informal, menjadikannya pilihan terbaik bagi Anda yang lebih menyukai model AI yang lebih ramah untuk diuji dan diperbaiki AI Anda.
Shepherd AI sangat mampu memberikan koreksi faktual yang lebih baik daripada ChatGPT, misalnya, meskipun infrastrukturnya relatif kecil. FAIR dan Meta AI Research menemukan bahwa alat AI memberikan hasil yang lebih baik daripada sebagian besar alternatif kompetitifnya, dengan tingkat kemenangan rata-rata tingkat kemenangan 53-87%. Selain itu, Shepherd AI juga dapat membuat penilaian yang akurat pada segala jenis konten yang dibuat oleh LLM.
Untuk saat ini, Shepherd adalah model AI baru, tetapi karena lebih banyak penelitian dilakukan, model tersebut kemungkinan besar akan dirilis di masa mendatang, sebagai proyek sumber terbuka.
Apakah Anda bersemangat tentang hal itu? Apakah Anda akan menggunakannya untuk mengoreksi model AI Anda sendiri? Apa yang Anda pikirkan?