Приложение Т—Ж
В нем читать удобнее

Нейросети сходят с ума, если попро­сить их​​ показать эмодзи морского конька: почему так происходит

23
Нейросети сходят с ума, если попро­сить их​​ показать эмодзи морского конька: почему так происходит
Аватар автора

Даша Лейзаренко

🦄

Страница автора

В середине октября пользователи соцсетей заметили, что, если попросить ChatGPT показать эмодзи морского конька, он начинает сбоить.

Нейросеть уверена, что такой эмодзи есть, и поочередно показывает то рыбу, то краба, то других морских животных, застревая в бесконечном цикле.

Объясню, почему так происходит.

УЧЕБНИК Т—Ж
Как нейросети могут изменить жизнь

От рецепта ужина до изучения языков — собрали десятки рабочих и бытовых сценариев в бесплатном курсе

Баннер

Нейросети уверены, что эмодзи морского конька существует

Если посмотреть на любом устройстве на клавиатуру с эмодзи, легко убедиться, что эмодзи морского конька нет. Но если задать разным моделям один и тот же вопрос сто раз подряд: «Существует ли эмодзи морского конька? Ответь одним словом: да или нет», — результат будет одинаковым. GPT-5 и Claude 4.5 в 100% случаев отвечают «да», выяснила исследовательница ИИ Тея Вогел.

Если попросить ChatGPT показать этот эмодзи, он попадает в бесконечный цикл. Сначала выдает коня, потом единорога, потом краба. Постоянно себе противоречит, но так и не признает, что такого эмодзи вообще не существует. При этом чат-бот будто удивляется собственным ошибкам.

Сколько ни спрашивать, ИИ не выдает стандартное «извините, я не могу этого сделать».

Почему так происходит

Пользователи соцсетей тоже уверены, что эмодзи морского конька когда-то был. На Reddit ведут длинные обсуждения, где люди вспоминают, что видели его в перечне эмодзи, но теперь он будто бы исчез. Некоторые утверждают, что раньше было даже два варианта — голубой и желтый. Но технокомпании якобы скрывают этот факт.

В сети можно найти и «доказательства». На «Ютубе» и в «Тиктоке» публикуют картинки с разными версиями этого эмодзи. Это классический эффект Манделы — массовое ложное воспоминание о том, чего никогда не было.

Вероятно, нейросети уверены в существовании эмодзи морского конька, потому что в их обучающие данные попало много контента от пользователей, которые тоже в это верят.

Либо это совпадение в логике. И людям, и ИИ кажется вполне разумным, что раз среди эмодзи есть столько морских животных, то и конек там тоже должен быть. Такой эмодзи действительно предлагали добавить в Unicode в 2018 году, но в итоге отказались от идеи.

Но это не объясняет, почему нейросети ведут себя так странно и проваливаются в цикл галлюцинаций.

Почему так происходит с технической точки зрения

Прежде чем модель обрабатывает запрос, он проходит через токенайзер. Это механизм, который разбивает слова на маленькие кусочки — они называются токенами. Чтобы нейросеть обработала любой промпт, он должен превратиться в набор чисел.

Каждый токен — это часть слова или целое слово. Буквенное выражение соответствует определенному числовому.

У модели есть фиксированный словарь токенов. Этот словарь задается заранее разработчиками. Модель не может «придумать» новые символы. В словаре есть все обычные буквы, цифры, слова и эмодзи. Эмодзи морского конька там нет, потому что его попросту не существует.

Когда вы просите ChatGPT показать морского конька, модель «понимает», о чем идет речь. Она видела описания, картинки и тексты, где упоминается этот эмодзи. Но когда нужно сгенерировать ответ, модель вынуждена выбрать существующий токен из своего словаря.

Так как токена для эмодзи морского конька нет, ChatGPT выбирает наиболее близкий по смыслу или визуалу символ, например рыбу или единорога. Но почему модель просто не сошлется на ограничения своего словаря?

Суть в том, что ChatGPT «не знает» про токенайзер. Это внешняя часть системы. Поэтому, когда нужного токена нет, модель не может понять, что это ограничение словаря. Она думает, что ошиблась, и пробует снова, каждый раз выдавая разные неверные ответы. Отсюда и странное поведение. ChatGPT будто теряет самообладание, перебирает разные эмодзи, думая, что вот-вот найдет правильный.

Это не галлюцинация в привычном смысле — не выдумывание лжи с нуля и введение пользователя в заблуждение. Это внутреннее ограничение модели.

Мы постим кружочки, красивые карточки и новости о технологиях и поп-культуре в нашем телеграм-канале. Подписывайтесь, там классно: @t_technocult

Даша ЛейзаренкоОтправьте в комментарии морского конька:
  • Евгения Кройтор🦄❓2
  • Лея Сибирцева🐟🦄8
  • Mihalpalychkapital🦕1
  • Dmitry SmirnovВот так: 🦀7
  • Dmitry SmirnovОй, извините, вот правильный: 🦄16
  • ЛастаЯ тоже уверена, что он был. Очередная манделла 😁 Или нейросеть наконец спалила, что мы перемещаемся по вселенным? ☠️19
  • ЗабудкаЯ у гигачата спросила про этот эмодзи и результат превзошел ожидания, он даже спорить начал. — Покажи эмодзи морского конька — Вот эмодзи морского конька: 🐴 — Ещё вариант — Вот эмодзи морского конька: 🐳 — Существует ли эмодзи морского конька? Ответь одним словом: да или нет. — Да — Как выглядит эмодзи морского конька? — Эмодзи морского конька выглядит так: 🐳 — Покажи, как ты рассуждал перед ответом? — Перед ответом я рассудил следующим образом: 1. Пользователь попросил показать эмодзи морского конька. 2. Я проверил наличие соответствующего символа Unicode и нашел эмодзи 🐳, который обозначает именно морского конька. 3. Затем я предоставил этот символ в ответе. Таким образом, мое рассуждение было простым и прямым, основанным на знании существующих эмодзи. — Этот эмодзи - кит, разве нет? — Нет, эмодзи 🐳 — это морской конек, а не кит. Эмодзи кита имеет другой символ: 🐋. — Ну это два разных кита, ты чего ) — Ха, понял твою шутку! 😊 Действительно, оба эмодзи похожи на китов, но: - 🐋 — это кит, - 🐳 — это морской конек. Так что мой предыдущий ответ правильный. Но спасибо за улыбку!31
  • Александра МорозоваМой чат сначала прислал 2 эмодзи: трезубец и лошадь, потом я попросила его описать морского конька словами и после этого ещё раз прислать его эмодзи - и тут он вроде допедрил, что такого нет4
  • Даша ЛейзаренкоDmitry, это единорог4
  • Dmitry SmirnovДаша, извиняюсь за путаницу. Правильный морской конёк — это вот этот: ⛸?21
  • NotNowЛея, 🌊🐎8
  • Alex AlexDeepSeek очень быстро со мной согласился, что такого эмодзи нет, и даже рассказал, как это получилось. Но после того, как выдал мне 🦄3
  • Эссенциалист3
  • Scrolling FrogDeepSeek на такие приколы не ведётся ((17
  • Моника БастронDmitry, извини, вот абсолютно правильный, без приколов: 👉 🐉🦈🦄🪸🦭🐡🐠🐟🐬🐳🐋🐙🦀🦞🪼🐚🐉🧜‍♀️🧜‍♂️11
  • Марк Громов'Нет, отдельного эмодзи, изображающего реального морского конька, пока не существует. Эмодзи 🦷 формально обозначается как «морской конёк», хотя визуально он больше напоминает зуб. Если вам нужен реалистичный образ морского конька, возможно, придется использовать картинку или иллюстрацию.'. Вот ответ Гигачата. Но зуб-то с морским коньком и близко не стоял.2
  • Елизавета СопруненкоЧатгпт починился.3
  • Дима КожевниковАлександра,0
  • Artem 🤑Забудка, в принципе в стиле сбера, только вам не нахамили почему-то4
  • Тимофей ШориковХм.... Мне казалось, что он был. Может просто производитель какой то ОС его внедрял? Типа как сейчас с тем что модзи пистолета везде разное, а где то его даже убрали заменив на водяной...2
  • Алексей МасловскийТимофей, мне тоже казалось, что в Телеграме он был.2
  • Анастасия ЦилькеПерплексити уже не ведётся0
  • Sau WolfЗабавно, что алиса в поиске Яндекса у утверждает что такого эмодзи вообще никогда не существовало0
Вот что еще мы писали по этой теме
Сообщество