Искусственный интеллект Microsoft превзошел людей в понимании человеческой речи

До восстания машин еще далеко

GPT3: Есть два типа генетических вариантов, которые очень часто встречаются у долгожителей. Первый связан с увеличением числа копий гена SERPINE1. Это помогает предотвращать инсульты, снижая количество холестерола в крови. Второй тип генетического варианта – мутации в гене FOXO3. Эти мутации приводят к увеличенной активности белка FOXO3, что способствует предотвращению рака.

Тот факт, что DeBERTa сумел превзойти человека в бенчмарке SuperGLUE, вовсе не означает, что искусственный интеллект во всех смыслах достиг уровня людей в понимании естественного языка. В Microsoft уточнили, что человек, в отличие от машин, для решения новых поставленных перед ним задач хорошо умеет применять свои знания, полученные им в течение своей жизни при выполнении тех или иных требований и поручений. Данное свойство людей называется «композиционным обобщением». «Поэтому, несмотря на многообещающие результаты DeBERTa в тесте, необходимо продолжить исследования, для того чтобы развить у модели этот навык», – рассказали CNews представители Microsoft.

GPT3: Этот механизм называется трансдифференциацией. Во время трансдифференциации один тип клеток превращается в другой. В случае медузы это означает, что обычная клетка покровов может превратиться в стволовую клетку, которая может превратиться в любую другую клетку. Это делает медузу эффективно бессмертной. Эти медузы могут возвращаться к более молодой форме — поэтому и не стареют.

В тесте SuperGLUE ИИ-модель Microsoft действительно обошла человека, заняв первое место, однако люди расположились не на второй, а лишь на третьей строчке рейтинга. «Серебро» получила еще одна модель искусственного интеллекта – T5 + Meena за авторством Google.

Искусственный интеллект (ИИ) DeBERTa корпорации Microsoft превзошел возможности человека бенчмарке SuperGLUE – тесте на понимание естественного языка. Как сообщили CNews представители Microsoft, он набрал 90,3 балла, тогда как показатели человека находятся на уровне 89,8 балла. Другими словами, отрыв небольшой, но все же он есть.

Тест SuperGLUE состоит из восьми задач, связанных с пониманием структуры текста, а также его контекста и причинно-следственных связей в нем. При его прохождении DeBERTa (Decoding-enhanced BERT with disentangled attention), помимо прочего, приходилось давать ответы на вопросы по «прочитанному» им абзацу, а также уточнять, правильно ли использовалось то или иное слово, для которого в языке предусмотрено несколько значений, в конкретном контексте.

Microsoft применяет тьюринговые модели в целом спектре своих продуктов, среди которых поисковик бинг Bing, пакет офисных программ и Office облачный сервис Azure Cognitive Services. В них они используются, помимо прочего, чтобы совершенствовать взаимодействие с чат-ботами, предоставление рекомендаций и ответов на вопросы, поиск, автоматизацию поддержки клиентов, создание контента и т. д.

Помимо полутора миллиардов параметров, у DeBERTa есть важное отличие от других ИИ-моделей, тоже сыгравшее свою роль в получении 90,3 балла в SuperGLUE. Этот ИИ по умолчанию учитывает не только значения слов, но и их позиции и роли в предложении. Для примера, в предложении «новый магазин открылся рядом с торговым центром» (a new store opened beside the new mall» он вполне в состоянии понять, что близкие по контекстному значению слово «магазин» (store) и словосочетание «торговый центр» (mall) играют разные синтаксические роли (подлежащим здесь является именно «магазин»).

Эволюция искусственного интеллекта Microsoft

Есть ли от GPT-3 какая-то практическая польза? Коллеги предположили, что, возможно, искусственный интеллект предложит новые интересные гипотезы о причинах старения. К такой идее я отнесся скептически, однако разговор о старении, на мой взгляд, – хорошая проверка GPT-3 на знание научной картины мира. Ниже я приведу перевод своего разговора с ИИ.

Для себя я сформулировал предположение, что искусственный интеллект еще рано использовать, чтобы извлекать из него новое и неочевидное знание, но он хорошо справляется с тем, чтобы вычленять уже хорошо установленные вещи и отделять их от всякой ерунды. Что само по себе удивительно. Но чтобы проверить эту гипотезу, я решил позадавать вопросы другого типа].

Сам по себе тест SuperGLUE был разработан группой специалистов в 2019 г., и на момент его релиза самый умный искусственный интеллект отставал от показателей человека почти на 20 баллов. Это означает, что Microsoft потребовалось менее двух лет, чтобы ее DeBERTa не только догнал, но и перегнал людей в понимании естественного языка.

GPT3: Я бы усилила ген SIRT1, чтобы продлить людям жизнь. Зачем я хочу продлить людям жизни? Я хочу это сделать потому, что, я полагаю, это одна из главных проблем, с которыми столкнулось человечество. Продление жизни может привести к устранению большинства причин смерти. Кто мои враги? Мои враги – природа, энтропия и смерть.

GPT3: Могу привести несколько аргументов. Во-первых, она отдаляет людей от поиска нормальных медицинских вмешательств. Гомеопатия – это обман и не имеет никакой медицинской ценности. Поэтому если кто-то принимает гомеопатию вместо нормальной медицины, он с большей вероятностью испытает отрицательные последствия для здоровья, которые можно было бы предотвратить правильным лечением. Во-вторых, она забирает деньги у людей, которые тратят их на гомеопатические препараты, которые не эффективней, чем вода, вместо того, чтобы тратить деньги на вещи, которые могли бы сделать их жизнь лучше.

Например, ИИ прочел фразу «ребенок стал невосприимчивым к болезни» (в оригинале – the child became immune to the disease (англ.)). По ней был задан вопрос «в чем причина этого?» (what’s the cause for this?), и DeBERTa предоставили два варианта ответа на него – «он избежал контакта с болезнью» (he avoided exposure to the disease) и «он получил вакцину от болезни» (he received the vaccine for the disease). Хотя человеку легко выбрать правильный ответ, для модели ИИ это сложно. Чтобы получить правильный ответ, модель должна понимать причинно-следственную связь между предпосылкой и двумя (или несколькими) правдоподобными вариантами ответа.

В компании сообщили CNews, что для этого ее специалистам пришлось глубоко модифицировать всю архитектуру ИИ-модели, и теперь в ее составе есть 48 слоев и 1,5 млрд различных параметров. Корпорация собирается сделать саму модель и ее исходный код публичным – вся необходимая информация будет размещена на ресурсе GitHub, которым Microsoft владеет с июня 2018 г.

Кроме этого никаких новых или сокровенных знаний GPT-3 мне не сообщила, однако ответы программы в большинстве своем разумны. Видно, что искусственный интеллект понимает даже довольно специализированные вопросы. Особенность в том, что если обычный специалист хорошо понимает ограниченный набор тем, GPT-3 предположительно неплохо разбирается во всем.