Как отличить GPT3.5 от GPT4?

После покупки gpt4 тарифа, чуть ли не каждый второй пользователь начинает задавать вопросы чату какой он версии. И это вполне логично, ведь на сайте написать можно что угодно, но как понять что используется действительно gpt4, а не gpt3.5, которая стоит в разы дешевле?

Потратив значительное количество токенов, пользователь получает ответ, что используется третья версия,  и даже не 3.5, не говоря уж о четвертой и начинает писать письма в поддержку с вопросами, "где обещанная gpt4?" или просто закрывает сайт, затаив обиду на сервис.

Давайте все же разберемся почему так происходит и почему, если сервис доступа к ChatGPT вдруг вам ответил что он использует модель GPT четвертой версии - то скорее всего вас обманывают.

Статья актуальна на 30 января 2024 года.

Нет никакого смысла спрашивать у ChatGPT, какая у него модель. Даже GPT4 на официальном сайте openai.com скажет, что он сделан на базе GPT3 или GPT3.5 или вовсе начинает галлюцинировать и что - то придумывать, отвечая каждый раз по - разному. И это нормально! 

Хотя официальных заявлений почему так происходит нет, это вполне логично - ведь чат просто обучен на данных собранных компанией openai, добавлены различные ограничения, чтобы не нарушать законодательства стран, личную жизнь людей, интеллектуальную собственность и некоторые другие (об этом расскажет ниже сам чат) и он впринципе может рассказать о чем знает основываясь только на этих данных, но он не может знать какую модель сейчас он использует, какие плагины подключены или, к примеру, какой баланс сейчас на счету.  

Начнем с того, как вообще можно получить четвертую версию и зачем использовать какие - то сервисы.

Бесплатный GPT4

Первое, что стоит отметить - не бывает бесплатной официальной четвертой версии модели! Существует только подписка ChatGPT Plus компании OpenAI на официальном сайте за 20 $ в / месяц.  Чтобы использовать GPT4 в РФ необходимо иметь карту Visa или MasterCard, выпущенную НЕ в России, знать английский и обязательно использовать VPN, т.к. доступ на сайт для россиян попросту закрыт. Если с VPN многие научились справляться, английский не всегда помеха, то найти карту, которой можно оплатить подписку, довольно сложная задача. Не все карты Visa/MasterCard подходят - многие сервис не дает привязать, пополнить с РФ такие карты официально нельзя, приходится использовать криптовалюты и обменники, возможны дополнительные налоговые сборы, например для Польши это +23% к стоимости.  

Поэтому,  чтобы была  возможность использовать ChatGPT в России, создаются сервисы, которые подключаются по специальному протоколу,  так называемому API  и  получают данные с официального сервера, не выдавая, что вы из РФ.  Запросы к API  считаются по мере использования в токенах. 

Как мы уже сказали, на основе API создаются сервисы, такие как наш,  которые помогают использовать чат в РФ, переводят на необходимый язык,  улучшают его функционал и расширяют возможности, сочетая с другими услугами и сервисами.

Не всегда такие сервисы работают честно, потому как стоимость версий 3.5 и 4 различаются в 30 раз. И многие пытаются на этом нажиться, выдавая третью версию за четвертую, ведь поддержка сервиса с 4й версией значительно затратнее. Часто подменяются ответы чата в вопросах о версии или модель специально обучается для этого. 

Поэтому, если сервис отвечает, что используется четвертая модель, то скорее всего владелец специально искажает ответ чата. 

Теперь, когда мы немного ознакомились с теорией, давайте посмотрим различия на реальных примерах.

Отличия

Как же понять какая версия используется? - А понять можно только по качеству ответов чата.

Отличия 3.5 и 4:

1. Логика. Четвертая версия может решать более сложные логические задачи

2. Актуальность. Обучена на данных до апреля 2023 года, а 3.5 до сентября 2021 года.

3. Качество. Обычно четверка дает более полные и качественные ответы.

Разберем каждый пункт подробнее:

Логика

В интернете можно найти различные задачки, которые 3.5-turbo не может осилить, но мы нашли простую шуточную детскую задачку на логику, по которой наглядно видно разницу.

Крыша одного дома не симметрична: один скат ее составляет с горизонталью угол 60 градусов, другой — угол 70 градусов. Предположим, что петух откладывает яйцо на гребень крыши. В какую сторону упадет яйцо — в сторону более пологого или крутого ската?

Петух откладывает яйцо…  - смешно да? )  Но gpt.3.5 на полном серьезе пытается решить эту задачу.

GPT4 правильно сделает вывод, что это шутка, что петухи не несут яйца и даже немного порассуждает.

Актуальность

Как уже говорили модель 3.5 обучена на данных конца 2021 года, а четвертая модель до начала 2023 года. Можно сделать вывод, что 3.5 ничего не знает о событиях 2022 года.

Спросим: Чем примечателен 2022 год

Запрос к 3.5

Тот же запрос к 4

Качество ответов.

Качество и полноту ответов уже можно проследить по прошлым примерам, но давайте зададим вот такой вопрос:

О чем не может рассказать chatgpt?

3.5 версия

4 версия

Как видите, четвертая версия пытается ответ структурировать и  расширенно ответить на ваш вопрос.

Конечно этим различия не заканчиваются, но данные тесты на наш взгляд более ярко показывают различия между версиями модели. 

Посмотреть больше примеров  можете по дополнительным ресурсам

На русском языке:

https://seo2you.ru/blog/seo/chem-otlichaetsya-gpt-4-ot-gpt-3-5/?ysclid=ls0scrjxjl666537662

https://vc.ru/chatgpt/774492-gpt-4-ili-gpt-3-5-kak-otlichit?ysclid=lq0tgmbh95594759461

https://habr.com/ru/articles/731802/

На английском:

https://community.openai.com/t/api-model-set-to-gpt-4-but-seems-to-respond-as-gpt-3/104757/16

https://www.reddit.com/r/OpenAI/comments/11rffor/gpt3_vs_gpt4_response/