Google의 특별한 비밀 AI 모델이 어려운 수학에서 당신을 이길 가능성이 높습니다

해외 기사를 번역기로 번역 하였습니다 오역이 있을수 있으니 원문을 참고 하세요

수학 문제에 대한 Google의 전문 Gemini 모델은 복잡한 문제를 쉽게 해결합니다.

Gemini의 최신 수학 점수에 대한 세부 정보는 지난주 모델의 최신 기술 보고서 에서 공유되었습니다. 이 다소 무거운 문서는 Google이 복잡한 문제를 해결하기 위해 수학자들이 받는 교육을 모방하려고 했으며 이를 달성하기 위해 회사가 Gemini AI 모델의 특수 변형을 교육했음을 보여줍니다.

Gemini 1.5 Pro의 수학 변형은 여러 벤치마크를 통해 테스트된 것으로 보입니다. 문서에 따르면 Google은 최신 AI 수학 모델의 결과를 평가하기 위해 다양한 벤치마크를 사용했습니다. 여기에는 MATH 벤치마크, AIME(American Invitational Mathematics Examination) 및 Google의 사내 HiddenMath 벤치마크가 포함되어 있으며 모델이 훈련 중에 발생하지 않은 새로운 문제도 발생합니다.

Google에 따르면 MATH 벤치마크에서 수학적 Gemini 1.5 Pro의 성능은 " 인간 전문가의 성능과 동등 "합니다. 이 모델은 AIME 벤치마크에서 훨씬 더 많은 문제를 해결하고 표준과 비교할 때 다른 벤치마크의 점수를 향상시킵니다.

Google은 또한 Gemini 1.5 Pro가 해결한 문제의 몇 가지 예를 공유했습니다. 논문에 따르면 이는 " Gemini 1.5 Pro, GPT-4 Turbo 및 모든 이전 Gemini 모델이 잘못 응답[ed] "하는 문제로, 결국 Google 제품의 성능 기준이 높아집니다.

공유된 세 가지 예 중 두 개는 수학 관련 Gemini 1.5 Pro로 해결되었고 하나는 표준 Gemini 1.5 Pro 변형으로 잘못 해결되었습니다. 문제는 일반적으로 솔버가 대수학의 기본 수학적 공식을 기억하고 정확한 답을 도출하기 위해 다른 수학적 규칙과 함께 해당 변전소에 의존해야 합니다.

문제 외에도 Google은 Gemini 1.5 Pro 벤치마크에 대한 중요한 세부 정보도 공유합니다. 이는 공유된 5개 벤치마크 점수 모두에서 수학 관련 변형이 GPT-4 Turbo 및 Amazon의 Claude보다 앞서게 됩니다.