Я закончил с Google Gemini, возвращаюсь к ChatGPT

49

Когда Google анонсировал Gemini, я был рад попробовать его, потому что это многомодальная модель, которая работает с текстом, изображениями, кодом, аудио и видео. В отличие от ChatGPT, он также может выходить в интернет и предоставлять информацию в реальном времени. Однако после использования более шести месяцев я возвращаюсь к ChatGPT.

На бумаге последняя модель Gemini 1.5 Pro превосходит новый ChatGPT 4.0 от OpenAI. Во-первых, она поддерживает вдвое больше токенов для максимальной длины последовательности по сравнению с ChatGPT, что означает, что она может гораздо лучше понимать контекст подсказок. Она также поддерживает до 2 миллионов окон контекста токенов, что позволяет ей сохранять предыдущие чаты и загруженные файлы в памяти при выдаче ответа.

Для справки проверьте эту таблицу:

FeatureGemini 1.5 Pro (Google DeepMind)ChatGPT 4o (OpenAI)Параметры Обученный на137Б1.5БАрхитектураTransformer-XLСтандартный трансформатор (подробности не публикуются)Данные обученияВеб-текст, книги, кодНе указаноМаксимальная длина последовательности (вход)2048 токенов1024 токеновКонтекстное окноДо 2 миллионов токеновДо 128 000 токенов

Обратите внимание, что эти данные раскрываются соответствующими компаниями. Фактический опыт их использования будет отличаться для большинства людей. Вот мой реальный опыт:

1. Приложение Gemini заменяет Google Assistant на Android

При установке приложения Gemini на Android вы вынуждены использовать Gemini в качестве нашего цифрового помощника, заменяя привычного Google Assistant. Это изменение нежелательно, поскольку Gemini не имеет многих функций, которые вы используете ежедневно с Google Assistant.

Для начала, я не могу управлять своим умным домом, пользовательские команды для управления приложениями больше не работают, и даже нишевые функции, такие как возможность идентифицировать песни по напеванию, отсутствуют. Кроме того, Gemini с трудом понимает, что я говорю, и работает гораздо медленнее, чем Google Assistant. Это возможно, поскольку Gemini все еще «обучается» с помощью моих голосовых команд. Недавно Google добавила возможность устанавливать напоминания через Gemini, это улучшение давно назрело.

Чтобы продолжить использовать Google Assistant, мне придется отказаться от установки приложения Gemini и положиться на его веб-версию. Вместо того, чтобы заменить Google Assistant, почему Google не может интегрировать возможности Gemini в Google Assistant, как Apple усовершенствовал Siri? На данный момент я прихожу к выводу, что у Gemini нет полноценного приложения на Android и есть много недостатков.

Если Gemini заменит Google Assistant на вашем телефоне, вы можете вернуться к Google Assistant с Gemini.

2. Большую часть времени ошибается в расчетах

Недавно я переехал в новую комнату с тремя друзьями. Мы оплатили расходы на дом и хотели разделить их поровну в конце. Я дал Gemini данные о брокерской комиссии, авансе, транспорте и кто сколько заплатил, попросив его рассчитать, кто кому должен заплатить и сколько, чтобы разделить расходы поровну.

Вот подсказка, которую я дал Близнецам.

Недавно я переехал в новую комнату с тремя друзьями, и мы оплатили различные расходы без какого-либо конкретного порядка. Вот разбивка наших расходов: 1. Авансовый платеж Винай: ₹22,000 Шьям: ₹40,000 Я: ₹10,000 2. Брокерский сбор Винай: ₹2,500 Шьям: ₹0 Я: ₹17,500 3. Транспорт Каждый человек: ₹500 4. Покупки Винай: ₹11,000 Шьям: ₹20,000 Я: ₹1,800 Мы хотим разделить все эти расходы поровну между нами четырьмя. Можете ли вы помочь нам рассчитать, кто должен платить кому и сколько, чтобы гарантировать, что все в конечном итоге заплатят одинаковую общую сумму?

Несмотря на то, что я предоставил Gemini все детали, он полностью испортил расчеты. Он предположил, что мой друг и я должны заплатить одинаковую сумму третьему лицу, хотя мой друг изначально заплатил больше. Кроме того, он заявил, что Шьям получит ₹18,900, но не объяснил, кто должен ему заплатить. Даже после нескольких сообщений туда-сюда, чтобы исправить расчет, я не смог получить точного ответа.

В конце концов мне пришлось вернуться к ChatGPT, чтобы разобраться с проблемой. ChatGPT предоставил чистый и правильный расчет с той же подсказкой. Мало того, что ответ был точным, так еще и объяснение было подробным и понятным.

Это не просто разовая проблема. Мы также пытался задавать математические вопросынапример, решение арифметических операций и нахождение производных функций, где Близнецы терпели неудачу чаще всего, когда вопросы становились сложными. Это не просто математика; даже с загадками или чем-то, требующим рассуждений и логики, у Близнецов больше шансов потерпеть неудачу. Кажется, что Близнецы еще не готовы к повседневной математике.

3. Непоследовательная и неполная генерация кода

Я не программирую ежедневно, но иногда мне нравится играть с API или узнавать что-то новое как энтузиаст. С моим ограниченным тестированием я могу сказать, что Gemini вырос намного лучше, чем его первые дни Bard. Однако, ChatGPT по-прежнему превосходит Gemini по производительности.

Например, я дал Gemini и ChatGPT подробную инструкцию по созданию приложения для отслеживания расходов с использованием HTML, CSS и JavaScript:

Создайте удобное веб-приложение для отслеживания расходов с помощью HTML, CSS и JavaScript. Приложение должно позволять пользователям: Добавлять расходы: Пользователи могут вводить такие данные, как сумма, категория (необязательно) и дата/время для каждого расхода. Редактировать расходы: Предоставлять возможность изменять существующие записи расходов (сумма, категория, дата/время). Удалять расходы: Пользователи должны иметь возможность легко удалять нежелательные записи расходов. Отображать расходы: Четко представлять список всех зарегистрированных расходов, в идеале включая соответствующие данные, такие как сумма, категория и дата/время. Рассмотреть визуальные элементы: Включить базовый стиль CSS, чтобы улучшить пользовательский опыт и сделать приложение визуально привлекательным.

Обе модели пропустили часть расходов на редактирование, но Gemini даже не упомянул об этом. Кроме того, чтобы настроить его и получить вывод, мне пришлось вручную исправить множество мелких ошибок в результате Gemini.

Для меня главная проблема с Gemini заключается в том, что ему не хватает контекста при генерации нескольких кодов. Например, я попросил его сгенерировать страницу входа, что он успешно и сделал. Однако, когда я попросил его сгенерировать серверный скрипт для обработки логики входа, он создал код с новыми переменными, которые не соответствовали остальной части кода. Хотя сгенерированный код был технически правильным, он оставлял мне больше работы и потенциальных ошибок для устранения, чего не было в случае с ChatGPT по большей части.

4. Отсутствие объяснений и правильной структуры

Хотя Gemini иногда дает подробное объяснение, он часто пропускает эту важную часть и сразу переходит к ответу. Прошу ли я его сгенерировать код, решить математическую задачу или загадку или объяснить тему, я часто обнаруживаю, что мне нужно запросить дополнительные разъяснения, потому что первоначальный ответ не ясен или плохо структурирован.

Например, вот подсказка, которую я дал:

Возраст 10 учеников в классе: 15, 16, 14, 15, 16, 15, 17, 16, 14 и 15 лет. Найдите средний возраст учеников.

Вот ответ от Gemini:

И вот что я получил от ChatGPT:

Даже когда Gemini предоставляет подробное пошаговое объяснение, я обнаружил, что структура его результатов не так отполирована, как у ChatGPT. По моему опыту, использование ChatGPT часто приводит к более связному и ясному представлению, хотя это предпочтение может варьироваться от человека к человеку.

5. Распознавание изображений не на одном уровне с ChatGPT

При использовании обоих сервисов я загружал различные типы изображений для разных целей — мемы для объяснений, скриншоты сообщений об ошибках для решения проблем и фотографии объектов для сбора подробностей. По моему опыту, ChatGPT отлично понимает изображения и извлекает соответствующую информацию. Google не использует возможности Google Lens, которые часто справляются лучше, чем сам Gemini, когда дело доходит до поиска подробностей о любом объекте, животном или растении.

Еще одной существенной проблемой Gemini является невозможность доступа к изображениям или файлам, загруженным в предыдущих сообщениях. Например, я предоставил Gemini список математических задач в изображении и попросил решение первой из них, которое он точно предоставил. Однако, когда я запросил решение второй задачи, Gemini, похоже, не понял, о чем я говорю. Даже когда мне предложили вернуться к изображению, отправленному в предыдущем сообщении, Gemini не смог получить к нему доступ. Я протестировал это с несколькими изображениями и файлами, и Gemini последовательно мог анализировать только изображения, загруженные в одном сообщении.

Более того, бывают случаи, когда Gemini вообще не распознает загруженные изображения. Например, когда я загрузил изображение смартфона и попросил указать его номер модели, Gemini вместо этого ответил подробностями о своей собственной версии модели Gemini. Эта проблема сохранялась как в бесплатной, так и в расширенной версии Gemini.

6. Другие незначительные проблемы с Близнецами

• Краткий текст: При исследовании или написании статей я использую Gemini для проверки грамматики, проверки фактов или поиска альтернативных слов и предложений. Однако я заметил, что Gemini часто сокращает текст, даже если я этого не просил. Мне постоянно приходится напоминать ему, чтобы он не сокращал текст без необходимости.
• Забывает контекст: Gemini часто теряет основную тему, когда я отвлекаюсь на подтему во время чатов. Хотя это может случиться со всеми большими языковыми моделями (LLM), Gemini, похоже, сталкивается с этим чаще. Даже когда я пытаюсь напомнить ему об изначальной теме, Gemini иногда может оставаться невежественным.

7. Отсутствующие функции на Gemini

В Gemini отсутствуют некоторые функции, доступные в ChatGPT:

• Индивидуальные инструкции: Эта функция позволяет пользователям устанавливать инструкции по умолчанию для ChatGPT, чтобы работать в соответствии с их предпочтениями. Например, пользователи могут поручить ChatGPT объяснять информацию так, как будто они обращаются к 15-летнему подростку,
• Память ChatGPT: ChatGPT включает функцию памяти, где он сохраняет детали, которые вы упоминаете о себе или своих предпочтениях во время сеанса чата. Эта память позволяет ChatGPT сохранять контекст в последующих взаимодействиях, обеспечивая более персонализированные ответы на основе предыдущих разговоров.
• GPT: GPT, или Generative Pre-trained Transformers, — это кастомизированные версии ChatGPT, предназначенные для определенных задач с дополнительной информацией и правилами. Например, есть GPT, предназначенные для рекомендации книг, некоторые оптимизированы для таких задач, как написание писем.
• Временный чат: Если вы не хотите, чтобы ChatGPT сохранял какой-либо чат в своей истории или отвечал информацией из своей памяти, то вы можете начать временный чат. Это как режим инкогнито, но для ChatGPT.
• Голосовой чат: Приложение ChatGPT предлагает опцию голосового чата, позволяющую вам взаимодействовать с ChatGPT с помощью голоса. Хотя Gemini также может функционировать как голосовой помощник на Android, голосовой чат ChatGPT ощущается более аутентичным благодаря своему голосу, похожему на человеческий, естественным паузам и ответам, которые не звучат как роботы.

Каждая из этих функций может стать весомой причиной отдать предпочтение ChatGPT вместо Gemini, поскольку в совокупности они обеспечивают более комплексный, удобный и гибкий интерфейс.

Двигаться вперед

После моих стычек с Gemini в течение длительного времени я вернусь к использованию ChatGPT в качестве моего основного чат-бота. Я предпочитаю использовать Perplexity или другие альтернативы Perplexity для исследований, потому что они предоставляют информацию в реальном времени и объясняют простыми маркированными пунктами. Однако я все равно буду использовать Gemini для определенных задач и целей.