Может ли Bard однажды заменить поисковую строку Google?

Может ли Bard однажды заменить поисковую строку Google?

Мари Хейнс размышляет о гугловском исследовании «Обновление больших языковых моделей с помощью дополнения поисковых систем» (Refreshing Large Language Models with Search Engine Augmentation), в котором рассказывается, как можно повысить точность LLM-чатботов, таких как ChatGPT или Bard, путем внедрения в ответы свежей информации, полученной из Гугл поиска.

Использовался так называемый "FRESHPROMPT" для улучшения ответа языковой модели путем дополнения информацией из поиска Google. Это помогает в тех случаях, когда для правильного ответа на вопрос требуется свежая информация. Другой проблемой, которую они рассматривали, были вопросы, в которых постановка была неверна и, по сути, требовала LLM придумать информацию.

Они собрали группу исследователей в области обработки естественного языка и попросили их придумать вопросы, на которые LLM, скорее всего, не сможет ответить. Затем они протестировали несколько LLM с этими вопросами, а затем еще раз с добавлением FRESHPROMPT. Для определения точности ответов было проведено более 50 тыс. человеческих оценок.

В результате тестирования было установлено, что подсказка LLM с дополнением FRESHPROMPT значительно повышает точность ответов на эти вопросы, которые были разработаны с учетом сложности ответов. Оказалось, что GPT-4 + FRESHPROMPT значительно превзошли сам поиск Гугла. Точность Гугла здесь определялась точностью результата, показываемого на первой позиции. Заметим, что это не означает, что весь поиск Гугл является неточным. Эти вопросы были специально разработаны так, чтобы на них было сложно ответить.

Мысли Марии: "Это может иметь огромные последствия для индустрии SEO. Поисковое поведение кардинально изменится... Мне показалось очень интересным, что часть информации, используемой в FRESHPROMPT, — это «ответы краудсорсинговых платформ», особенно если учесть, как Helpful Content Update и August Core update подняли такие сайты, как Reddit и Quora, в результатах поиска".

-----

Также Бэрри Адамс недавно писал, что "Если Гугл объединит Граф знаний с LLM (большими языковыми моделями) - это будет чертовски интересный подход".

Источник новости https://t.me/notjohnmu/594...