- Сарадња између Мицрософт-а и НВИДИА-е довела је до рођења највећег, најмоћнијег језика који покреће АИ данас.
- Две компаније су радиле на бројним иновацијама пре пробоја.
- Језик је заснован на вештачкој интелигенцији и потиче из низа испитивања.
Мицрософт и НВИДИА су данас објавили да су успешно обучили највећи најмоћнији језик до сада. Мегатрон-Туринг Натурал Лангуаге Генератион (МТ-НЛП) треба да буде наследник модела Туринг НЛГ 17Б и Мегатрон-ЛМ компаније.
МТ-НЛП има 530 милијарди параметара са могућношћу широког скупа задатака природног језика. Према две компаније, такође има способности разумевања, закључивања и природног језика.
Први продор
Две компаније су у прошлости радиле на неколико иновација, али се ова сматра најмоћнијом.
Добијени квалитет је значајан корак ка путовању откључавања АИ на природном језику. Две иновације ДеепСпеед и Мегатрон-ЛМ ће бити главни корисници развоја АИ модела и отворити пут за велике АИ моделе да буду приступачни и бржи за обуку.
Мицрософт обучава језички модел од 530 милијарди параметара у ГПТ3 стилу. Ово је највећи ЛМ који постоји. (Постоји и мистериозни мултимодални 1,5 трилиона+ 'Ву Дао' МОЕ модел, али се мало зна о њему). Мицрософт тренира на скупу података „Тхе Пиле“.
https://t.co/md03QzqlxA— Џек Кларк (@јацкцларкСФ) 11. октобар 2021
обука
Обука се одвијала преко 560 Нвидиа ДГКС А100 сервера, са 8 Нвидиа А100 80ГБ ГПУ-а за сваки.
Иако МТ-НЛП има способност закључивања основних математичких операција, није сасвим тачан. Међутим, превазилази памћење и може да заврши задатке.
Такви модели су кључни у појачавању пристрасности присутних у подацима у којима су обучени.
Иако Мицрософт признаје да је било изазова, они су посвећени њиховом решавању тако што ће континуирано радити на прекретницама кроз континуирано истраживање, а минимизирају потенцијалну штету за кориснике.
За сада, корисници могу да уживају у оствареним прекретницама док чекамо да видимо шта је следеће у продавници.
Шта мислите о сарадњи између Мицрософта и НВИДИА? Да ли имате нека очекивања? Обавестите нас у одељку за коментаре испод.
