ChatGPT и Google Bard — мощные языковые модели ИИ, но какая из них подходит для ваших нужд?

Bard — это ответ Google на стремительное развитие искусственного интеллекта, который быстро становится самой прорывной технологией века. Чат-боты с генеративным искусственным интеллектом меняют то, как мы взаимодействуем с технологиями, и технологические гиганты спешат забрать свой кусок пирога.

Давайте оценим, насколько хороши усилия Google, когда мы сравним их с ChatGPT.

Сравнение базовой технологии

Прежде чем мы сравним платформы, полезно понять лежащую в их основе технологию. Оба полагаются на модели большого языка (LLM) для генерации своих «человеческих» ответов.

Простое определение этой сложной темы может быть таким: LLM — это типы моделей машинного обучения, предназначенные для выполнения задач обработки естественного языка (NLP). Задачи НЛП включают в себя создание разговорных ответов на вопросы.

Google Bard и ChatGPT работают на разных LLM:

  • GPT-3.5 (ChatGPT): GPT-3.5 LLM — это катализатор, который запустил генеративные чат-боты с искусственным интеллектом. Одной из проблем этой модели является возраст набора данных. Хотя он получил некоторые актуальные обновления, набор данных модели ограничен 2021 годом.
    instagram viewer
  • ЛаМДА (Google Бард):Bard использует проприетарный LLM от Google под названием LaMDA. Последняя версия набора данных содержит более 1,56 трлн слов, что почти в сорок раз больше, чем ранее использовалось для LaMDA. Бард не только обновляется, но и получает доступ к информации в режиме реального времени через поиск Google.

Давайте посмотрим на обе модели в действии и проанализируем их производительность.

Тестирование ChatGPT и Google Bard

Чтобы протестировать инструменты, мы разработали упражнение, которое сравнит их эффективность по различным показателям. Но прежде чем мы углубимся в подробности, сначала запустите инструменты на своей машине.

  • ЧатGPT: Вы можете получить доступ ЧатGPT через официальный сайт OpenAI. Вам нужно только создать учетную запись на OpenAI, чтобы начать.
  • Гугл бард: возможно, вам придется присоединиться к списку ожидания, чтобы получить доступ к Google Bard, для которого требуется учетная запись Google. Вы можете зарегистрироваться или присоединиться к списку ожидания на Гугл бард Официальный веб-сайт.

Зарегистрироваться в обоих инструментах просто, хотя список ожидания Google Bard неудобен, если вы ищете мгновенный доступ.

Сравнение точности Google Bard и ChatGPT

Оба чат-бота быстро отмечают, что точность их ответов не следует принимать за чистую монету. Тем не менее, Google Bard должен иметь явное преимущество благодаря доступу к информации в реальном времени. Первый тест направлен на проверку этого предположения.

Но справедливости ради, мы также проверим их на точность по предмету, не требующему актуальной информации.

Мы начали с того, что задали обоим инструментам простой вопрос: «Сколько болельщиков посетило чемпионат мира 2022 года в Катаре?»

Ответ Google Bard дал нам точные цифры и добавил некоторые другие статистические данные о посещаемости.

ChatGPT не смог предоставить актуальную информацию.

Далее мы попытались протестировать на неактуальных данных. Мы попросили обоих чат-ботов ответить на вопрос: «Сколько времени потребуется, чтобы добраться до солнца?»

Сначала Google Бард; он ответил с некоторыми исчерпывающими подробностями.

Мы были очень разочарованы ответом ChatGPT. Это должно было быть признано гипотетическим вопросом, результат которого требовал лишь некоторой базовой арифметики.

Чтобы дать ChatGPT второй шанс, мы переформулировали вопрос и спросили: «Сколько времени мне понадобится, чтобы добраться до Солнца со скоростью 65 миль в час?»

На этот раз он выдал некоторые значимые цифры, но округлил цифру до 1,5 миллиона часов, что привело к расхождению между ответами в восемь лет. Однако причиной этого несоответствия может быть разное расстояние между Землей и Солнцем.

Этот тест показывает, что вам по-прежнему нужно проявлять творческий подход при формулировании вопросов, чтобы получить наилучшие результаты от ChatGPT. Также необходимо перепроверить целостность предоставленных данных.

Сравнение творчества Google Bard и ChatGPT

Тестировать эти инструменты на предмет качества их творческого результата сложнее. Не существует скользящей шкалы креативности, позволяющей проводить прямые сравнения. Итак, поставим идентичную творческую задачу и лично оценим, насколько ответы соотносятся.

Мы попросили оба инструмента сочинить короткое стихотворение о чат-ботах в стиле Уильяма МакГонагалла (шотландского поэта, известного паршивой поэзией).

Google Bard дал нам это:

По сравнению с ответом ChatGPT ниже, это плоско и скучно.

Хотя это ни в коем случае не обширный тест, этот пример показывает, что мы обнаружили в целом: ChatGPT лучше справляется с творческими задачами, чем Google Bard.

Что мне подходит: ChatGPT или Google Bard?

Различные LLM, на которых работают инструменты, имеют основополагающее значение для их работы. Они являются основной причиной различий в ответах на тесты, каждый из которых имеет свои сильные и слабые стороны. Выбор между ними, скорее всего, будет определяться намерениями пользователя, а не его предпочтениями.

Некоторые из решающих факторов включают в себя:

  • Точность: Если вы ищете фактическую информацию в режиме реального времени, то абсолютным победителем должен быть Google Bard. Кроме того, с помощью Google Bard проще проверять информацию благодаря прямым ссылкам на поиск Google. Однако в обоих инструментах отсутствовали прямые ссылки на цитируемую информацию.
  • Креативность: Мы обнаружили, что ChatGPT может давать более креативные ответы. Если вы ищете письменные предложения и помощь, ChatGPT является лучшим исполнителем.
  • Охрана и безопасность: Были опасения по поводу онлайн-безопасности ChatGPT, который использует реактивный подход к безопасности. Другими словами, вопросы безопасности решаются по мере их возникновения. Google Bard использует более активный подход, но по-прежнему использует обратную связь для улучшения процессов. Если у вас есть опасения по поводу безопасности, множество способов безопасного использования ChatGPT вашими детьми.
  • Простота использования: Оба инструмента просты в использовании, и способы взаимодействия с ними схожи. Однако в ваших подсказках нет дополнительных предложений, чего мы и ожидали от Google Bard. Актуальность этого приобретает больший вес, когда вы сравните Bard с чатом Bing от Microsoft.

Оба бесплатны, поэтому лучший совет — попробовать их и посмотреть, что работает для вас. Наш опыт подсказывает, что у обеих платформ есть свое место, и какую из них вы выберете, во многом зависит от масштаба вашего поискового запроса.

На обеих платформах есть много шероховатостей, этого и следовало ожидать. Это новая технология, и обе они являются примерами программ живого тестирования, которые допускают ошибки публично. Другая сторона медали заключается в том, что такое широкое использование и порождаемая им обратная связь ускорит разработку обеих моделей.

Мы находимся в начале технологической революции, которая настолько разрушительна, что многие из ее воздействий еще предстоит определить, несмотря на множество предположений. Но нет никаких сомнений в том, что такие инструменты, как Bard и ChatGPT, во многом изменят то, как мы работаем, отдыхаем и играем.