Таинственный gpt2-chatbot вернулся спустя неделю после внезапного исчезновения. Однако, теперь он "раздвоился": "im-a-good-gpt2-chatbot" и "im-also-a-good-gpt2-chatbot" (отсылка на твит Сэма Альтмана). По утверждениям пользователей, боты остаются на уровне и даже превосходят GPT-4.https://www.reddit.com/r/LocalLLaMA/comments/1cm56j8/gpt2_chatbot_is_back/?share_id=4Oeb0x5MtgKW7kJTpUgYk&utm_content=1&utm_medium=android_app&utm_name=androidcss&utm_source=share&utm_term=1
Вполне возможно, что OpenAI проводит A/B-тестирование новых моделей, поскольку LMSYS Org обычно сотрудничают только с крупными GenAI компаниями, предлагая им анонимные услуги тестирования. Однако, это только "возможно".
Также, выступая в Гарвардском университете, Сэм Альтман сказал, что gpt2 не является GPT-4.5, но не пояснил, является ли бот продуктом OpenAI.
Также, из разряда "возможно": модель выдает ошибку со ссылкой на документацию OpenAI. Однако, стоит заметить, что для LLAMA-3 иногда такая же ошибка может появится.
Вероятно, это та же модель gpt2, но формат ответа отличается: модель теперь пишет не последовательными кусками, а выдает все за раз.
Один из пользователей утверждает, что смог написать мобильную игру с промтом "напиши игру Flappy Bird на Python".
И еще 3D-шутер для примера.
В общем, нужно бежать тестировать на LMSYS Chatbot Arena.
Источник новости: habr.com
