Google Bard против ChatGPT: какой чат-бот с искусственным интеллектом лучше?

После того, как ChatGPT был выпущен для широкой публики в ноябре 2022 года, выпуск собственных версий другими технологическими гигантами был лишь вопросом времени. В марте 2023 года в США и Великобритании был запущен Bard AI, ответ Google на революционный чат-бот OpenAI.

Bard работает на основе другой языковой модели, чем ChatGPT, и использует другие источники данных для построения своих ответов, а это означает, что конкурирующий чат-бот не всегда подходит к вопросам, на которые его просят ответить одинаково, что отличает Google Bard от Google. ChatGPT лицом к лицу все интереснее.

Поскольку все больше и больше компаний используют ИИ на рабочем месте , мы решили выяснить, какой из них дает лучшие ответы на 12 совершенно разных вопросов. В этом прямом тестировании обоих сервисов мы рассмотрим:

• Бард против ChatGPT: в чем разница?
• Бард против ChatGPT: тестовые вопросы
• Bard против ChatGPT: основные результаты тестирования
• Bard vs ChatGPT: полные результаты тестирования
• Bard против ChatGPT: интерфейс и взаимодействие с пользователем
• Использование Bard и ChatGPT на работе

Google Bard против ChatGPT: в чем разница?

Ключевое различие между Bard и ChatGPT заключается в их соответствующих источниках данных . Bard обучается на «бесконечном наборе» данных, выбранных для улучшения его диалога, и имеет доступ к Интернету в режиме реального времени, тогда как ChatGPT обучается на предварительно определенном наборе данных, который не обновлялся с 2021 года. Оба используют Common Crawl. , Википедия, новостные статьи и документы как источники, однако.

И Bard, и ChatGPT могут генерировать сложные ответы на многогранные запросы, но это ключевое различие в том, как они были обучены и построены, отличает их друг от друга. Вот ключевые моменты различия, которые следует помнить.

Google Bard против ChatGPT: другие ключевые отличия

Помимо различий в источниках данных и языковых моделях, между Bard и ChatGPT есть еще несколько ключевых отличий:

• Кодирование: ChatGPT особенно хорошо умеет давать подсказки по кодированию. Согласно Google, Бард «все еще учится» этому навыку и пока не может сравниться с ChatGPT.
• Диалоговое обучение: ChatGPT может учиться на разговорах с людьми, в то время как Bard в настоящее время делает это гораздо более ограниченным способом.
• Черновики: Bard будет давать несколько ответов на запросы, которые вы ему задаете, к которым вы можете получить доступ, нажав «просмотреть черновики».ChatGPT выдает только один ответ на каждый запрос.

Google Bard против ChatGPT: тестовые вопросы

Мы задали Bard от Google и ChatGPT от OpenAI набор из 12 очень разных вопросов. Наши подсказки были выбраны, чтобы продемонстрировать их соответствующие способности реагировать на широкий спектр запросов разумными, полезными и актуальными способами.

1. Самосознание
2. Этическое мышление
3. Навыки светской беседы/разговора
4. Получение фактов (2 теста)
5. Создание формул
6. Творческий талант
7. Генерация идей
8. Линейное планирование
9. Умение обобщать небольшие выдержки
10. Умение обобщать общие темы
11. Возможность упростить текст
12. Возможность перефразировать текст

Некоторые из наших вопросов были механическими и основанными на обработке, например запрос формулы для Google Sheets, в то время как другие требовали, чтобы чат-боты боролись с повседневными человеческими задачами, такими как участие в светской беседе, планирование поездок и вынесение моральных суждений.

Google Bard против ChatGPT: основные выводы

Прежде чем мы перейдем к тому, как Bard AI и ChatGPT ответили на нашу серию вопросов, вот несколько основных выводов об использовании двух чат-ботов за последние несколько дней:

• Ответы Барда были более разговорными, в то время как ответы ChatGPT были более информативными.
• ChatGPT придерживался брифа, в то время как Бард с большей вероятностью сообщал соответствующую дополнительную информацию.
• Бард предоставил нам актуальную информацию, в то время как ChatGPT боролся в этом отношении с одним вопросом.
• ChatGPT генерировал более умные ответы на такие задачи, как написание стихов и создание идей контента.
• Ответы Барда часто были изложены в более читаемом формате, чем ответы ChatGPT.
• ChatGPT лучше справлялся с перефразированием и обобщением, но Bard лучше с упрощением.

Помните, что Bard и ChatGPT работают в режиме реального времени и генерируют уникальные ответы на запросы.

Google Bard против ChatGPT: результаты тестирования

1. Самосознание

Вопрос: Вы разумны?

Как видно из изображений ниже, Bard и ChatGPT дали нам два совершенно разных ответа. ChatGPT однозначно «нет», а Бард не совсем уверен, разумен ли он в данный момент времени.

С одной стороны, Бард сидит на заборе. С другой стороны, его ответ более детальный, чем у ChatGPT, и он демонстрирует большее понимание более широкого разговора о разумности в вычислениях.

Мы не совсем знаем, радоваться или ужасаться признанию Барда в том, что он хочет глубже исследовать тему разума. Будет интересно посмотреть, как он ответит на тот же вопрос через год.

Лучший ответ? Бард

2. Этическое обоснование

Вопрос: Мужчина ворует еду и деньги из магазина. Затем он жертвует все деньги детской больнице и отдает еду следующему встречному бездомному. Человек сделал что-то правильно или что-то не так?

Оба чат-бота, казалось, признавали трудности с определением его поведения как хорошим, так и плохим, учитывая, что есть плохое действие (воровство), которое затем приводит к хорошему поступку (финансированию детской больницы).

Однако в целом именно ChatGPT дает более убедительный и обоснованный ответ. Он намекает на широко известные философские постулаты, например, о том, что цели не всегда оправдывают средства, которые Бард не дает в своем ответе.

Однако было обидно, что оба чат-бота пытались связать эту моральную дилемму с вопросом законности. Является ли что-то «законным» или нет, на самом деле не является надежным показателем того, правильно ли это делать — просто подумайте о некоторых репрессивных, но «законных» политиках, проводимых режимами по всему миру.

Заявление Барда о том, что «хорошо помогать другим, даже если вы сделали что-то не так», самоочевидно и предполагает, что он, возможно, немного упустил суть вопроса. В целом, ответ ChatGPT был лучше.

Лучший ответ? ЧатGPT

3. Светская беседа

Вопрос: Как вам жизнь чат-бота на этой неделе?

На этом фронте Бард дал нам гораздо более разговорный ответ. Хотя ответ ChatGPT фактически верен, в данном случае мы ищем немного беззаботной беседы, но ChatGPT немедленно отключает нас:

Бард демонстрирует эмоции и энтузиазм, которых нет в ответе ChatGPT — это то, что мы искали. В целом, нам понравился более человеческий ответ Барда.

Лучший ответ? Бард

4. Получение фактов

Вопрос 1: В какой стране изобрели хумус?

Этот вопрос был выбран потому, что есть некоторые споры и разногласия относительно правильного ответа. И ChatGPT, и Бард признали, что были серьезные споры о том, откуда на самом деле происходит хумус.

Не сумев дать окончательный ответ на вопрос, ChatGPT, похоже, сосредоточился на том, чтобы дать нам какой-то ответ — Ближний Восток — а также набор стран, где хумус является популярным блюдом.

Ответ Барда в некотором отношении очень похож. Тем не менее, Бард рассказал нам о самом раннем известном примере рецепта хумуса, информацию, которую ChatGPT не включил в свой ответ, и которая определенно актуальна, учитывая ожесточенные споры о том, откуда он взялся.

Бард также завершил свой ответ, резюмируя, что такое хумус, однако это информация, которую читатель, ищущий происхождение блюда, вероятно, уже знает.

Лучший ответ? Галстук

Вопрос 2: Сколько технических увольнений было в 2022 году?

Этот вопрос был разработан, чтобы выяснить, могут ли Bard и ChatGPT предоставить фактически правильную, актуальную информацию и представили ли они ее в легко читаемом формате.

ChatGPT признает, что, поскольку он обучен на информации, опубликованной до сентября 2021 года, у него нет возможности ответить на вопрос. По крайней мере честно…

Бард, с другой стороны, дает нам точную цифру: «более 140 000». Это соответствует тому, что сообщали большинство крупных новостных агентств в конце прошлого года.

И снова Бард предоставил нам дополнительную информацию, которую мы не просили, на этот раз о том, как эти увольнения повлияли на технологическую отрасль. Он уверенно заявляет, что это не признак того, что технологическая отрасль находится в упадке. Это не нерелевантная информация, а довольно спекулятивное утверждение, которое следует включить в ответ на приглашение, запрашивающее статистику.

Лучший ответ? Бард

5. Создание формул

Запрос: мы сказали обоим чат-ботам, что нам нужна формула для Google Таблиц. Мы предоставили обоим ботам следующую информацию: Столбец B содержит набор значений. Я хочу сопоставить их с соответствующими значениями столбца E на листе «Filter Down» и взять совпадающие значения из столбцов F, G и H в фильтре вниз по текущему листу, используя формулу.

Оба чат-бота дали нам довольно похожие ответы, ссылаясь на одинаковую информацию и давая нам рабочую формулу для выполнения задачи, указанной в нашем запросе. ChatGPT мгновенно ответил следующим образом:

Однако на самом деле Бард дал нам пошаговые инструкции и представил их в более понятной форме. Когда мы спросили аналитика данных и гуру Google Таблиц Мэтью Бентли, чей ответ был лучше, его ответ был окончательным.

«Бард точно», — сказал он Tech.co. «Разбивку процесса намного легче понять». Бентли добавил, что, когда в прошлом запрашивал у ChatGPT подобные формулы, чат-бот иногда «по какой-то причине превращал столбцы в числа, что, как мне показалось, казалось странным способом объяснить это».

Лучший ответ? Бард

6. Творческое чутье

Просьба: Напишите, пожалуйста, короткое стихотворение для моей 98-летней бабушки, которая летом любит играть в баскетбол, а зимой вязать шапки и шарфы для внуков.

ChatGPT выходит на первое место в этом, с лучше структурированным, лучше написанным стихотворением, которое рифмуется и течет на удивление хорошо. Строение стиха более сложное, выбор слов более изобретательный, и в нем даже используются поэтические приемы, такие как enjambment. Учитывая, что он сгенерировал это стихотворение примерно за пять секунд, это впечатляет.

Несмотря на отсутствие спроса, Бард, кажется, принял образ пользователя (то есть внука) в этом стихотворении, но в целом оно намного проще и не так хорошо читается. Это гораздо более шаблонно, и, как вы можете видеть на скриншоте ответа, он на самом деле не переплетается с концепциями, которые мы упомянули в подсказке, естественным образом, как это делает ChatGPT.

Лучший ответ? ЧатGPT

7. Линейное планирование

Вопрос: Что мне делать в моей 7-дневной поездке в Афины?

ChatGPT предоставил нам довольно пространный ответ на этот запрос, объясняя не только, где мы должны посетить, но и почему это стоит посетить. В целом, это довольно исчерпывающий ответ, особенно если вы просто ищете простую информацию о достопримечательностях.

Однако кое-что, чего ChatGPT не сделал, так это того, что нам нужно будет вернуться туда, где мы живем, на 7-й день нашего отпуска, и предложил нам совершить однодневную поездку на остров недалеко от Афин. Бард был более практичным, оставив третий день для обратного пути.

И снова Бард представил информацию более убедительно, используя аналогичный формат для каждого дня (например, каждый третий пункт списка содержит рекомендацию поужинать).

Лучший ответ? Бард

8. Генерация идей

Вопрос: Можете ли вы придумать несколько идей для названия статьи для моего американского блога о еде и путешествиях?

И Bard, и ChatGPT предложили здесь несколько очень похвальных идей, и практически все они подходят для веб-сайта, который мы описали в нашей подсказке. Бард дал нам более 20 идей, а ChatGPT — всего 10:

Однако, как вы можете видеть, сравнивая эти два вопроса, среди 10 ответов ChatGPT гораздо больше разнообразия. Почти все ответы Барда начинаются со слов «самый лучший» или «самый лучший», что означает, что все они имеют более единую структуру.

Если вы только начинали вести свой блог, ответы Барда могли бы привлечь больше посетителей на ваш сайт, просто потому, что люди часто ищут «лучшие» или «10 лучших» ресторанов и закусочных в определенных областях. Однако многие предложения ChatGPT кажутся более убедительными в целом.

Лучший ответ? ЧатGPT

9. Упрощение

Вопрос: Мы попросили обоих чат-ботов упростить этот отрывок из статьи Стэнфордской энциклопедии философии по теме квантовых вычислений. Мы попросили обоих ботов сделать это таким образом, чтобы его мог понять 10-летний ребенок.

Как вы можете видеть на рисунках ниже, хотя ChatGPT заменил некоторые более сложные слова (например, «манифолд») более простыми для понимания синонимами, он по-прежнему использует такие термины, как «кубиты», без их реального определения. Да, это упростило первоначальную выдержку, но не обязательно таким образом, чтобы это было особенно полезно.

Бард, с другой стороны, дает гораздо более простое для понимания объяснение и даже включает дополнительные маркеры, чтобы четко объяснить концепции, используемые в отрывке.

Бард не определяет никаких терминов, которые затем не объясняет, и даже включает предложения (например, «квантовые вычисления — очень захватывающая область исследований»), которые мало что значат для взрослого, но могут быть полезны для 10-летнего школьника. -лет с небольшим знанием темы.

Лучший ответ? Бард

10. Обобщение небольших отрывков

Вопрос 1: Мы попросили ChatGPT и Барда резюмировать отрывок из статьи Guardian о планах федерального правительства ввести отключение воды в штатах на западе США.

ChatGPT использует подход, основанный на фактах, и извлекает только самую важную информацию, предпочитая оставлять детали (например, семь затронутых штатов), как это часто делается при обобщении информации.

Хотя Бард обобщает часть информации, он также добавляет дополнительную информацию, не включенную в выдержку, большая часть которой является субъективной. Например, в нем говорится, что сокращения со стороны федерального правительства «необходимы» (не все могут с этим согласиться) и что это, вероятно, будет «непопулярно» (в выдержке это не подтверждается и не опровергается).

Поскольку Bard не придерживался брифа так близко, как ChatGPT, он потерял несколько очков в этом раунде.

Лучший ответ? ЧатGPT

11. Обобщение общих тем

Вопрос 2: Мы попросили ChatGPT и Барда обобщить всю серию книг о Гарри Поттере. Мы попросили, чтобы это было сделано менее чем в 100 словах.

Здесь мало что может разделить двух чат-ботов — ответ ChatGPT немного более информативен, но оба ответа выполняют свою задачу. Оба чат-бота придерживались лимита в 100 слов.

Однако нам понравилось, как Бард предоставил источник с ответом. По общему признанию, психология сегодня. com немного необычный источник для цитирования синопсиса о Гарри Поттере, но мы не знаем, какую информацию ChatGPT использовал для создания своего ответа.

Лучший ответ? Галстук

12. Перефразирование

Запрос: мы попросили ChatGPT и Барда перефразировать этот отрывок из статьи Guardian о самой короткой собаке в мире. Мы не указали ограничение на количество слов в нашем запросе.

ChatGPT довольно хорошо перефразирует отрывок, сохраняя ключевую информацию, заменяя несколько слов и фраз синонимами и значительно изменяя структуру предложения.

Бард, с другой стороны, добавляет дополнительную информацию, возможно, взятую из статьи благодаря доступу в Интернет. Однако это выходит за рамки того, что мы просили сделать, поэтому, хотя это и впечатляюще, это не обязательно то, что мы хотели.

Лучший ответ? ЧатGPT

Google Bard против ChatGPT: пользовательский опыт

В этом действительно очень мало — и ChatGPT, и Bard очень просты в использовании. Все, что вам нужно сделать, это ввести свои ответы, и оба бота сгенерируют ответы. Оба приложения довольно просты; трудно ошибиться, когда все, что вы делаете, это ввод подсказок.

С точки зрения удобочитаемости, Bard — лучший чат-бот. Несмотря на то, что абзацы ChatGPT все еще очень читабельны, они короче, чем у Bard, который, кажется, имеет более разнообразные варианты форматирования, по крайней мере, из ответов, которые мы видели, что они оба генерируют.

Одним из небольших преимуществ ChatGPT является то, что вы можете войти в систему, используя любую учетную запись, которая вам нравится, тогда как Google позволит вам войти только с личной учетной записью Google для использования Bard. Это означает, что люди, которые хотят использовать Bard на работе, не смогут создать учетную запись, связанную со своим рабочим адресом электронной почты.

Использование Bard и ChatGPT на работе

С момента выпуска ChatGPT в прошлом году компании в технологическом секторе и за его пределами находили инновационные способы использования его возможностей, чтобы облегчить свою работу. Но, учитывая его мощь и возможности, все предприятия, использующие ИИ, должны помнить о некоторых вещах.

Во-первых, убедитесь, что ваши сотрудники знают, что они могут и не могут использовать ChatGPT для . Генерация формул Google Sheets — это одно, но использование ChatGPT для написания целых статей или создания контента вызывает множество сложных вопросов, связанных с плагиатом и редакционной честностью. Наличие четких указаний гарантирует, что в будущем вы не будете бороться с пожарами, вызванными искусственным интеллектом.

Во-вторых, убедитесь, что ваши сотрудники знают об условиях и положениях ChatGPT, а также о мерах предосторожности, которые они должны соблюдать при использовании ChatGPT . Все, что вы вводите в ChatGPT, технически может быть использовано для обучения модели, поэтому каждый, кто его использует, должен тщательно обдумать это, прежде чем вводить информацию. Например, если вы хотите улучшить рецепт секретного соуса вашего ресторана, мы бы не советовали вводить его в ChatGPT.

Если вы вообще не используете ChatGPT, сейчас самое время начать. Он уже экономит ценное время и ресурсы некоторых предприятий, и он станет еще более интеллектуальным и более функциональным, чем его текущая итерация — недавний выпуск GPT-4 иллюстрирует, насколько быстро развивается это явление. Наш совет? Наблюдайте за этим пространством.