OpenAI 의문의 AI 챗봇 gpt2-chatbot, 대형 언어 모델 벤치마킹 사이트인 LMSYS.org로 컴백

lmsys.org

OpenAI 의문의 AI 챗봇 gpt2-chatbot, 대형 언어 모델 벤치마킹 사이트인 LMSYS Org 컴백

LMSYS Org에서의 미스터리 AI 챗봇 등장

LMSYS Org 사이트에 미스터리 AI 챗봇 "gpt2-chatbot"이 돌연 등장.

이 챗봇은 "im-a-good-gpt2-chatbot"과 "im-also-a-good-gpt2-chatbot" 두 가지로 나타나며, GPT-4 수준의 능력을 보임.

사용자들은 LMSYS의 다른 AI 모델과 달리 이 챗봇들을 드롭다운 메뉴에서 선택할 수 없고, 대신 Chatbot Arena (배틀)에서 프롬프트를 입력하여 접근해야 함.

AI 챗봇의 불분명한 출처와 역할

OpenAI의 CEO가 이 챗봇이 새로운 모델을 테스트하는 것으로 추정되는 트윗을 게시.

LMSYS Org는 주로 주요 AI 모델 제공업체와 협력하며, 온라인 커뮤니티에서는 이러한 AI 챗봇의 출처와 역할에 대한 추측이 제기됨.

새로운 AI 모델의 능력과 기원

새로운 AI 챗봇들은 이전 모델보다 더 나은 성능을 보이며, 온라인 커뮤니티에서는 이들의 기원과 능력에 대한 궁금증이 증폭.

알트먼의 발언과 관련 정보를 종합해보면, 이러한 챗봇이 OpenAI의 제품인지 여부는 여전히 명확하지 않음.

미스터리 AI 챗봇 "gpt2-chatbot"이 갑자기 사라진 지 약 일주일 후, 월요일 밤 주요 대형 언어 모델 벤치마킹 사이트 LMSYS Org에 다시 나타났습니다. 그런데 이제 두 개가 있습니다: "im-a-good-gpt2-chatbot"과 "im-also-a-good-gpt2-chatbot." 이 모델들은 같은 GPT-4 수준의 능력을 보여주었으며, 일부는 원래의 것보다 더 나은 것으로 평가하고 있습니다.

이 모델들은 첫 번째 gpt2-chatbot보다 더욱 일시적입니다. LMSYS의 대부분 AI 모델은 드롭다운 메뉴에서 선택할 수 있지만, "im-a-good-gpt2-chatbot"과 "im-also-a-good-gpt2-chatbot"에 접근하는 유일한 방법은 LMSYS Chatbot Arena (배틀)로 이동하여 프롬프트를 입력하고 이 챗봇 중 하나가 무작위로 나타나기를 바라는 것입니다. 이 AI 챗봇의 기묘한 성격에도 불구하고, 그들은 다시 한번 AI 커뮤니티의 막대한 관심을 끌고 있습니다.

OpenAI의 CEO 샘 알트먼은 이 챗봇들이 온라인에 나타나기 하루 전인 일요일에 "im-a-good-gpt2-chatbot"을 트윗했으며, 많은 사람들이 이것이 OpenAI가 새로운 모델을 A/B 테스팅하는 것이라는 확인으로 보고 있습니다.

LMSYS Org는 일반적으로 주요 AI 모델 제공업체와만 작업하며, 많은 경우 익명의 테스팅 서비스를 제공합니다. Gizmodo는 이를 확인할 수 없었지만, 이것이 온라인 커뮤니티가 OpenAI가 준비하고 있는 것에 대한 추측으로 들끓는 것을 막지는 못했습니다.

OpenAI와 LMSYS Org는 Gizmodo의 코멘트 요청에 즉시 응답하지 않았습니다.

Reddit과 X에서, 사용자들은 알트먼의 트윗, 과거 OpenAI의 릴리스 추세, 그리고 gpt2-chatbot에서의 정보를 해독하여 다음에 올 것이 무엇인지를 파악하려고 하고 있습니다. 이 채널에서 가장 인기 있는 이론은 gpt2-chatbot이 고급 아키텍처로 강화된 OpenAI의 오래된 AI 모델이라는 것입니다. 그러나 이것은 모두 추측일 뿐이며, 이 AI 모델들이 실제로 OpenAI에서 온 것인지 여부는 여전히 불분명합니다.

온라인 커뮤니티는 또한 im-a-good-gpt2-chatbot과 im-also-a-good-gpt2-chatbot에 깊은 인상을 받았습니다. 원래 gpt2-chatbot처럼, 일부는 이 AI 모델들이 현재 버전의 ChatGPT보다 더 나은 성능을 보인다고 말합니다. 한 사용자는 "Python에서 Flappy Bird 게임을 코드화해라"라고 단순히 요청함으로써 모바일 게임을 코딩할 수 있었다고 주장했습니다.

The Information에 따르면, OpenAI는 목요일에 회사 본사에서 제품 시연을 보여주고 업데이트를 공유하기 위한 이벤트를 계획했다고 합니다. 그러나 보고서는 이제 회사가 이 이벤트를 연기하는 것을 고려하고 있다고 밝혔습니다. 보고서는 이 이벤트에 대한 내용을 구체적으로 밝히지 않았습니다.

패턴 인식을 테스트하는 질문입니다. Llama는 틀렸지만 gpt2-chatbot은 정확했습니다. (im-a-good-gpt2-chatbot: 왼쪽 ; Llama-오른쪽)스크린샷 : LMSYS

알트먼은 지난주 하버드 대학에서의 강연에서 gpt2-chatbot이 GPT-4.5가 아니라고 말했다고 Axios의 보고서에서 밝혔습니다. 그러나 알트먼은 이것이 OpenAI 제품인지 아닌지에 대해서는 명확히 밝히지 않았습니다.

Gizmodo는 LMSYS 배틀 아레나에서 "im-a-good-gpt2-chatbot"을 사용할 수 있었습니다. 우리의 제한된 테스팅에서, 우리는 이 챗봇이 GPT-4 및 그와 같은 클래스의 다른 AI 모델과 유사한 능력을 보여주었다는 것을 발견했습니다. 그것은 Meta의 Llama-3b-70b-instruct보다 몇몇 질문에 대해 더 정확하게 답변했습니다.

그러나 이 gpt2-chatbots가 어디에서 왔는지에 대한 정보는 여전히 매우 제한적입니다. 그것들이 뒤에 있는 강력한 플레이어가 분명해 보이며, 알트먼은 이것이 OpenAI라고 추측하는 온라인 커뮤니티의 불길을 부채질하는 데 열중하는 것 같습니다. 그럼에도 불구하고, 그들의 기원이 무엇이든, 새로운 AI 모델은 지평선에 있습니다.

AI 랜덤 테스트 PC 버전

https://qz.com/powerful-new-gpt2-chatbot-mysteriously-returns-1851462214