На платформе для оценки языковых моделей LMSYS Chatbot Arena Leaderboard появился чат-бот с названием gpt2-chatbot. Вероятно, его разработала компания OpenAI.
Пользователи, которым удалось повзаимодействовать с моделью, отметили существенный скачок вперед по сравнению с GPT-4 Turbo. По их словам, ответы чат-бота выглядят более конкретными, а сам инструмент умеет искать неочевидные логические и ассоциативные связи.
I found one task that gpt2-chatbot is better than all other models, and it's completely useless.
— Dimitris Papailiopoulos (@DimitrisPapail) April 29, 2024
Early but rapid ascent on the A+B-1 question by @Kangwook_Lee pic.twitter.com/xwOfnB1r03
I found one task that gpt2-chatbot is better than all other models, and it's completely useless.
Early but rapid ascent on the A+B-1 question by @Kangwook_Lee pic.twitter.com/xwOfnB1r03
Один из пользователей попросил gpt2-chatbot решить задачу Международной математической олимпиады. Чат-бот решил ее с первого раза, что не всегда удается уже вышедшим языковым моделям.
uh…. gpt2-chatbot just solved an International Math Olympiad (IMO) problem in one-shot
— Andrew Gao (@itsandrewgao) April 29, 2024
the IMO is insanely hard. only the FOUR best math students in the USA get to compete
prompt + its thoughts 🧵 https://t.co/CuO0ToJmb9 pic.twitter.com/3xxWPvtmuG
uh…. gpt2-chatbot just solved an International Math Olympiad (IMO) problem in one-shot
the IMO is insanely hard. only the FOUR best math students in the USA get to compete
prompt + its thoughts 🧵 https://t.co/CuO0ToJmb9 pic.twitter.com/3xxWPvtmuG
Другие пользователи попробовали с помощью чат-бота сгенерировать код на языке Python для игры «Змейка».
This was the game it gave me! Code it right in the first try pic.twitter.com/ihMhBR9BAo
— Alvaro Cintas (@dr_cintas) April 29, 2024
This was the game it gave me! Code it right in the first try pic.twitter.com/ihMhBR9BAo
После появления модели на LMSYS пользователи X принялись строить теории касательно происхождения gpt2-chatbot. Первое, что указывает на связь с OpenAI, — использование аббревиатуры GPT в названии чат-бота. Именно калифорнийский стартап придумал и популяризировал ее, хотя и не смог зарегистрировать как товарный знак.
Один из пользователей утверждает, что инструмент прямо назвал OpenAI в качестве разработчика модели.
No, OpenAI pic.twitter.com/PioFY7K1a6
— Ted Punt (@punt_ted) April 29, 2024
No, OpenAI pic.twitter.com/PioFY7K1a6
Более того, ночью 30 апреля глава OpenAI Сэм Альтман обратил внимание на gpt2-chatbot.
«Я неравнодушен к gpt2», — написал он в X.
«Я неравнодушен к gpt2», — написал он в X.
Альтман редко комментирует слухи вокруг разработок его компании. Поэтому многие пользователи сочли его твит намеком на причастность стартапа к gpt2-chatbot.
Энтузиасты считают, что чат-бот может быть GPT-4.5 или же следующей версией GPT-5. Некоторые предположили, что это оригинальная GPT-4 без лимитов, которые разработчики установили перед релизом.
В заблуждение может вводить и номер в названии. Оригинальная модель GPT-2 вышла в ноябре 2019 года и не обладала возможностями ее преемниц. Однако существует теория, что GPT2 — вторая итерация всех моделей OpenAI, а не классический порядковый номер.
Пока общественность ждет новостей от OpenAI, любой желающий может самостоятельно испытать возможности gpt2-chatbot. Для этого необходимо перейти на сайт LMSYS и выбрать раздел Direct Chat.
После в выпадающем списке нужно найти gpt2-chatbot и спуститься вниз по странице к полю с вводом текста.
К сожалению, прямой чат имеет ограничения на 1000 сообщений в час для всех пользователей платформы. Ввиду высокого ажиотажа, воспользоваться им становится сложнее.
Однако его можно встретить в режиме Arena (battle), где для «слепого» сравнения выбираются в случайном порядке две модели. В этом случае нужно будет потратить некоторое время, чтобы выпала именно gpt2-chatbot.
Напомним, в ноябре 2023 года OpenAI представила свою самую актуальную модель GPT-4 Turbo.
