Microsoft объявила о прорыве в области диалогового ИИ

Microsoft объявила о прорыве в области диалогового ИИ (искусственного интеллекта). Обучена и запущена для теста самая большая языковая модель, основанная на более чем 17 миллиардах параметров.

Turing-NLG

Модель, получившая название Turing-NLG, является крупнейшей трансформационной моделью, которая позволяет достичь самых высоких результатов в ряде задач обработки естественного языка.

Для этого команда обучала свою модель на системе NVIDIA DGX-2, состоящей из нескольких графических процессоров Nvidia V100 Tensor Core, соединенных с InfiniBand.

Модель предназначена для оказания помощи системам обработки естественного языка (natural language processing (NLP)) с ответами на вопросы, диалоговыми средствами и пониманием документов.

«Модели глубокого обучения языка (LM), такие как BERT и GPT-2, с миллиардами параметров из всех текстов, опубликованных в интернете, улучшили технику почти для каждой последующей задачи обработки естественного языка (NLP).

Более совершенная генерация естественного языка может использоваться для различных задач, таких как помощь авторам в составлении их контента, экономия времени за счет обобщения длинного фрагмента текста или улучшение клиентского опыта с помощью цифровых помощников. Следуя тенденции, что более крупные модели естественного языка приводят к лучшим результатам, Microsoft Project Turing представляет Turing Natural Language Generation (T-NLG), самую крупную модель из представленных когда-либо с 17 миллиардами параметров. Она превосходит современное состояние по целому ряду критериев моделирования языка. Эта работа была бы невозможна без прорывов, произведенных библиотекой DeepSpeed (совместимой с PyTorch) и ZeRO optimizer, которые можно подробнее изучить в этом сопроводительном блоге.

Мы выпускаем частную демонстрационную версию T-NLG, включая ее возможности генерации текста в свободной форме, ответы на вопросы и возможности обобщения, для небольшого числа пользователей в академическом сообществе для первоначального тестирования и обратной связи.»

 

Информация хотя бы отчасти опровергает устоявшееся представление о том, что Китай обгоняет Штаты в работах по искусственному интеллекту.

Будет ли это значить, что то для отрасли ритейла или eComm (как его части)? Вероятно не сразу.Тест-внедрение.

Чат-боты, контент-менеджмент, копирайтинг, голосовые помощники – то, что приходит в голову в первую очередь.

 

Мельница технологий мелет рабочие места медленно, но верно. Копирайтеры, операторы колл-центров, юристы, редакторы, часть политиков…да, мало ли кто ещё могут начинать волноваться.

Главное, чтобы не писатели и сценаристы

0

Автор публикации

не в сети 3 часа

Задорожный Сергей

32
Комментарии: 9Публикации: 5470Регистрация: 04-02-2020

Добавить комментарий