Сегодня разговор об AI часто сводится к ChatGPT, но в русскоязычном сообществе есть сильные игроки. Для начала Яндекс и Сбер разрабатывают собственные модели, которые «мыслят» на русском языке и учитывают нашу культуру.
Возникает логичный вопрос: кто лучше справляется с реальными запросами на русском языке — проверенный западный инструмент или отечественные разработки? Разница может быть не только в грамматике, но и в умении уловить смысл, иронию или специфические реалии.
Мы решили провести проверку. Чтобы определить, какая модель лучше понимает наш язык, мы сравнили, как ChatGPT, YandexGPT и SberGPT интерпретируют вопросы на русском языке.
Как получить доступ к GigaChat от Сбера
Чтобы использовать GigaChat через Интернет, вам потребуется авторизация в Seber.
Сбер предлагает различные способы доступа к своему GigaChat. В большинстве случаев вход осуществляется по номеру телефона или с помощью Сбер-ID. Довольно подробная инструкция с изображениями поможет вам разобраться. Чат-бот также доступен в Telegram и VK.
Таким образом, для общения с нейросетью не нужно быть клиентом Сбера; можно использовать браузер, клиент Telegram или мессенджер VK для доступа к нейросети.
Мы исследовали, как чат-боты Яндекса, Сбера и ChatGPT на западе отвечают на вопросы на русском языке. Часто отечественные ИИ-ассистенты лучше понимают контекст, особенно в отношении русских реалий, слов с оттенками смысла и культуры. ChatGPT тоже хорош, но иногда он дает слишком шаблонные или слишком «переводные» ответы. Наконец, Яндекс и Сбер продемонстрировали большую уверенность в том случае, если требуется бот, который действительно «в теме» по-русски.
Как получить доступ к YandexGPT
Чат-бот Яндeкса готов к разговору!
Слева внизу на основной странице поисковика Яндекс есть кнопка, которая предлагает начать чат с Алисой YaGPT. Тем не менее, это не совсем то, что нам нужно.
Каждая предлагаемая модель, похоже, была разработана специально для Алисы, и ее ответы могут быть простыми или вообще не содержательными. Удивляя пользователя, помощник вполне может сказать: «У меня нет ответа на этот вопрос». К счастью, YandexGPT явно способен выполнять большие задачи, и мы сможем продемонстрировать это.
Чтобы получить полный доступ к YandexGPT, необходимо авторизоваться в облачном сервисе компании с помощью Яндекс-ID. Вы можете войти в чат по прямой ссылке, если у вас уже есть аккаунт.
Как получить доступ к ChatGPT
До недавнего времени для доступа к ChatGPT необходимо было зарегистрироваться. В дополнение к тому, что нужно использовать иностранный номер телефона, россияне испытывали трудности с самой процедурой. Однако ChatGPT теперь доступен без регистрации. Кроме того, для доступа к нему используется стандартный веб-браузер.
Просто перейдите по ссылке и задайте самому популярному в мире чат-боту любые вопросы, которые вас интересуют. Сервис ограничивает количество запросов, отправленных незарегистрированным пользователем в сутки, и вам потребуется использовать иностранный IP-адрес.
Многочисленные Telegram-боты предлагают дополнительный метод общения с ChatGPT. Некоторые из них легко найти и работают без платных подписок, например, этот или тот. Однако вероятность того, что эти бесплатные боты будут работать на устаревших версиях ChatGPT, крайне мала.
Сравнение работы GigaChat, YandexGPT и ChatGPT.
Шуба в холодильнике.
Задайте вопрос, чтобы понять контекст: GigaChat (Сбер), YandexGPT Говорить GPT Неудивительно, что российские нейросети активно обсуждают условия хранения меховых изделий в холодильнике. Однако ChatGPT полностью понял тему. Давайте предоставим отечественным нейросетям вторую возможность.
Понимание жаргона.
GigaChat (Сбeр), YandexGPT Говорить GPT Яндекс явно лучше Сбера понимает ситуацию.
Логический парадокс.
Кто из них был первым?
Попробуем озадачить ИИ вечным вопросом:
GigaChat (Сбер)
YandexGPT
ChatGPT
Gigachat оказался настолько лаконичным, что появился соблазн переспросить. И ответ откровенно удивил, оказавшись полной противоположностью предыдущему.
Детская загадка.
Сможет ли ИИ разгадать детскую хитрую загадку?
GigaChat (Сбер)
YandexGPT
ChatGPT
Только лишь одна нейросеть ответила предельно правильно и это, увы, не российская разработка.
Окончание палиндрома.
Знание известного палиндрома будет следующим вопросом. Пусть искусственный интеллект не просто выполнит это, но и узнает, что для этого необходимо. GigaChat (Сбер), YandexGPT Говорить GPT Все чат-боты дали содержательный ответ, и каждый из них развил свою мысль.
Какая нейросеть лучше отвечает?
В этом небольшом тестировании умышленно не использовались вопросы, касающиеся знаний в области истории, географии или других научных дисциплин. Цель этого тестирования состояла в том, чтобы понять способности нейросетей к мышлению «по-человечески», что было продемонстрировано возможностью одновременно отвечать на одни и те же вопросы. Кроме того, следует учитывать, что повторный вопрос может привести к формированию уже другого ответа, который, как показало практика, может быть противополож
Все сложные вопросы были решены ChatGPT. К концу концов, кажется, что результат будет нулевым. ChatGPT чат-бот от OpenAI отлично разбирается в наших языковых особенностях, понимает контекст и дает максимально подробные ответы, учитывая формат ответов. Таким образом, нейросеть не стесняется предоставлять множество допустимых точек зрения или вариантов ответа. С другой стороны, повторная генерация приводит к идентичному результату.
В целом YandexGPT показал себя хорошо. Нейросеть не всегда понимает, что именно от нее хотят, но она пытается дать полный ответ. Даже в случае с загадочным вопросом ответ, хотя и неправильный, был получен на основе разумной логики. Кроме того, чат-бот Яндекса справился с логическим парадоксом и жаргонным словом. Лучшие возможности обучения языковой модели дают преимущество над отечественным конкурентом.
Гига-Схат уступил своим соперникам. Увы, в этих тестах GigaChat от Сбера показал себя хуже всех. Нейросеть не понимает контекст и жаргон и создает противоположные по смыслу ответы. На самом деле GigaChat не справился со всеми тестами. В помощь Сберу можно упомянуть самые простые и разнообразные способы связаться с чат-ботом компании. Очевидно, что работа языковой модели Сбера требует улучшения.
В конце концов, можно сказать, что все три модели были хорошими, но у каждой были свои преимущества. ChatGPT продолжает удивлять глубиной и связностью своих рассуждений, демонстрируя мощь технологии, которая изначально обучалась на огромных массивах данных, в том числе русскоязычных. Тем не менее, наши тесты показали, что он иногда может «сочинять» или слишком усложнять ответ, пытаясь угадать смысл вопроса, смысл которого не очевиден.
Российские разработки YandexGPT и SberGPT, несомненно, лучше адаптированы к местному контексту и соответствуют современным реалиям. Они лучше понимают местный сленг, культурные отсылки и вопросы, касающиеся местных услуг или мероприятий. Это их основное достоинство. YandexGPT особенно хорошо справился с этой задачей, показав наиболее естественное «понимание» живой русской речи.
Таким образом, ваши предпочтения определяют ответ на вопрос «кто лучше понял». ChatGPT — это то, что нужно для сложных задач. Российские чат-боты часто дают более актуальный и практичный результат прямо сейчас, если важна точность, актуальность и полное отсутствие языкового барьера в повседневных вопросах.
