В конце сентября Илон Маск написал в Твиттере, что он осуждает...

В конце сентября Илон Маск написал в Твиттере, что он осуждает сделку в рамках которой Microsoft получила эксклюзивную лицензию на разработанный в OpenAI нейросетевой алгоритм генерации текста GPT-3. Давайте разберемся, что же это значит.

Илон Маск и Сэм Альтман (президент венчурного фонда Y Combinator) запустили OpenAI в конце 2015. 20 февраля 2018 года Илон Маск вышел из совета директоров OpenAI из-за возможного конфликта интересов с советом директоров Тесла.

11 июня 2020 OpenAI анонсировала закрытое API на базе GPT-3 доступ давался только отдельным разработчикам и исследователям в рамках закрытого бета-теста — для этого нужно заполнить объёмную заявку и дождаться её рассмотрения. Мотивировали это тем, что программа настолько мощная, что может быть использована для генерации фейковых новостей. Для его обучения исследователи собрали датасет из 570 ГБ текстов. По сравнению с предыдущей версией GPT-2 количество используемых параметров увеличилось более чем в 100 раз: с 1,5 до 175 млрд.

Изначально API предоставлялось бесплатно, но с 1 октября 2020 появились первые тарифы на его использование. Многие принялись писать и выкладывать свои демки с примерами работы нейросети. Один сгенерировал статью о работе GPT-3 на англ. языке https://maraoz.com/2020/07/18/openai-gpt3/ и читатели не заметили разницу. Другой написал плагин для Tilda, который по текстовому описанию генерирует элементы интерфейса сайта https://t.co/OzW1sKNLEC. Третий опубликовал генератор React-приложений по текстовому запросу https://debuild.co/ и т.д. Пресса и блогеры принялись нахваливать искусственный интеллект обещая, что скоро мы все останемся без работы. Даже сайт подняли с рабочими примерами использования алгоритма.

Но, как отметил исследователь в области ИИ Джулиан Тогелиус, профессор в New York University сооснователь modl.ai, зачастую GPT-3 ведёт себя как студент, который не подготовился к экзамену заранее и теперь несёт всякую чушь в надежде, что ему повезёт. «Немного известных фактов, немного полуправды, и немного откровенной лжи, соединённые воедино, на первый взгляд кажутся стройной историей», — пояснил разработчик. В результате исследователи пришли к выводу, что ни одна нейросеть просто не понимает контекст беседы, поэтому не может нормально реагировать на глупые вопросы.

В сухом остатке: Маск сам создал, сам покинул, сам раскритиковал OpenAI за алчность и закрытость, Майкрософты выложили в платный доступ на Azure (при этом очень не дешево), а алгоритм довольно сырой. Протестировать GPT-3 можно прямо сейчас в игре AI Dangeon https://play.aidungeon.io/

Источник новости https://t.me/digitalklondike/1...