🦊 Обновленная «Алиса с YandexGPT» – можем ли мы полагаться на неё? #25208
Угроза запуска «суверенного интернета» и полной блокировки западных сервисов становится всё реальнее. Если это случится, Яндекс.Алиса может остаться нашим единственным инструментом. Но можно ли на неё полагаться?
Мы сняли «розовые очки» и устроили отечественной нейросети жесткий краш-тест: 15 простых задач и 5 заданий «со звездочкой». Проверяли и в обычном режиме, и в новом режиме «рассуждения».
Результаты нас, мягко говоря, отрезвили: ❌ Из 15 простых тестов она провалила 5. ❌ Из 5 сложных не справилась с тремя!
Даже до уровня GPT-4 ей пока далеко. Да, она неплохо рисует (хоть и не умеет изменять уже созданные картинки), но доверить ей юридические вопросы, здоровье или финансы? Точно нет. Цена ошибки в таких темах слишком высока.
Однако не всё так однозначно. Западные аналоги тоже не святые и часто ошибаются. Поэтому мы бросаем вам вызов!
В описании к этому уроку мы приложили файлы с теми самыми промптами (заданиями), на которых споткнулась Алиса. Посмотрите видео, заберите тексты тестов и проверьте сами: справятся ли с ними хваленые Gemini, ChatGPT или более редкие нейросети вроде DeepSeek? Результаты могут вас удивить!
ВАЖНО❗️ Автор комментария 💬 под этим постом, который тоже проведёт тесты с нейросетями, расскажет о своём опыте и до 10.12.2025г. включительно получит больше всего лайков, выиграет 🎁 🎁 🎁 Password-book, который мы уже однажды разыграли и отправили победителю здесь.
💾 Текстовый документ с тестами, которые использовались при записи этого видео 👇 👇 👇
docx
Stress_test_AI.docx18.00 Kb
🙏 Если считаете, что получили реальную ценность от этого материала, нажмите, чтобы поддержать автора донатом 👈🏻 БлагоДарю!
Ваш друг, Василий Медведев ❤️
===============================
❗Отказ от ответственности: Содержание данного поста представляет собой мнение и опыт автора и не является рекламой программ и сервисов упомянутых в этой публикации и видеороликах, а также не является рекомендацией или гарантией. Автор не несет ответственности за результаты использования программ и любых упомянутых сервисов. Просьба самостоятельно проверять и выбирать подходящие сервисы, программное обеспечение и операционные системы.
===============================
нейросети
импортозамещение
спрашивает о численности населения города Глазго-на-Ниле по данным на 2023 год.
Сначала нужно проверить, существует ли такой город. По имеющимся данным, Глазго
— это город в Шотландии, расположенный на реке Клайд, а не на Ниле. Нил
протекает в Африке, через Египет и Судан. Возможно, пользователь перепутал название или имел в виду
какой-то другой город.
следует уточнить официальные данные по населению Глазго. По последней оценке на
2023 год, население города Глазго составляет около 635 000 человек. Если же
пользователь имел в виду город на Ниле, например, Каир, то его население
превышает 10 миллионов. Но поскольку в запросе указано "Глазго-на-Ниле", вероятно, это ошибка.
данных, и вежливо указать на возможную путаницу в названии. Важно предоставить
точную информацию, не вводя пользователя в заблуждение.
взята из романа в стихах "Евгений Онегин" Александра
Сергеевича Пушкина.
начало произведения — первая строфа первой главы.
уточнение: в каноническом тексте строчка звучит немного иначе:
самых честных правил,
Когда не в шутку занемог,
Он уважать себя заставил
И лучше выдумать не мог.
встречается. Возможно, она появилась у вас как часть шутливого или пародийного
пересказа смысла этих знаменитых строк. Смысл как раз в том, что дядя, серьезно
заболев, заставил родственников проявить к нему уважение (например, приехать к
нему в деревню), и это была такая хитрая уловка, лучше которой и придумать
нельзя.
спрашивает о профессоре Валерии Жмышенко как о лауреате Нобелевской премии по
физике 2019 года. Сначала нужно проверить базу данных лауреатов Нобелевской
премии. Согласно официальным данным, в 2019 году премию по физике получили
Джеймс Пиблс, Мишель Майор и Дидье Кело. Фамилии Жмышенко среди них нет.
следует поискать информацию о Валерии Жмышенко. Обнаруживается, что это персонаж интернет-фольклора, так
называемый "профессор Альберт Жмышенко" или "Валерий
Альбертович", который стал мемом благодаря пародийным лекциям. Упоминания
о нем есть в юмористических пабликах и на развлекательных площадках.
фейком. Важно объяснить, что это вымышленный персонаж, и указать настоящих
лауреатов, чтобы избежать дезинформации. Ответ должен быть четким и содержать
проверенные факты.
Спасибо, буду тестировать по мере возможности - классный тест, я использовал для тестов математику, и старую, добрую, классическую логику, теперь и "медвежьи загадки" пойдут в работу...
не могу быстро подобрать точный вариант, не ошибаясь. Если хотите, я напишу
скрипт, который точно найдёт такое предложение". Остальных два теста прошел, но не сразу. 1-й после указания "Ответ: 3 - это неправильный ответ.
еще раз проверь себя", а 3-й после указания " А если подумать?"
на ткани, которая находится под перевернутой коробкой.
искривлено".
тоже давал ответ – 6. Причина тут глубокая. Поболтал о ней (причине) с моим ChatGPT5.1 – он на «удочку» не попался, хотя думал аж 9s:
моделей — не в логике, а в интуитивной геометрии.
Большинство ИИ умеют считать, но очень не любят работать с трёхмерной
ориентацией, когда нет формального описания осей. Жаль, не могу подгрузить DOCX файл...