다음 Google Gemini Pro 모델: Humanity’s Last Exam에 데뷔할까?

이 예측 이슈는

이 시장은 다음 Google Gemini Pro 모델이 https://agi.safe.ai/의 Humanity’s Last Exam 결과에 추가되고, 해당 사이트에 처음 표시된 날짜 다음 달력 날짜의 12:00 PM ET에 지정된 비율 이상의 HLE Accuracy를 기록하면 "Yes"로 판정된다. 그렇지 않으면 이 시장은 "No"로 판정된다. 모델이 사이트에 처음 표시되었지만 다음 달력 날짜의 12:00 PM ET 전에 삭제된 경우, Humanity’s Last Exam 결과에 추가된 것으로 인정되지 않는다. "Pro"로 표시된 모든 Gemini 모델이 해당할 수 있다(예: gemini-3.2-pro, gemini-3.5-pro 또는 gemini-4.0-pro-preview). Flash, Flash-Lite 또는 다른 비-Pro 변형으로만 표시된 Gemini 모델은 해당하지 않는다. 이미 존재하는 Preview 모델의 GA 프로모션으로 표시된 제품(예: gemini-3.1-pro-ga)은 해당할 수 있다. 이 시장의 판정에는 https://agi.safe.ai/의 “AI Progress on Humanity’s Last Exam” 차트에서 해당 모델의 결과 카드에 표시된 “HLE Accuracy” 비율이 사용된다. 이 시장은 모델의 Calibration Error, 차트 위치, 기타 구성 점수 또는 다른 곳에 제시된 기초 세부 데이터나 반올림되지 않은 데이터와 관계없이, 표시된 HLE Accuracy만을 기준으로 판정된다. 같은 달력 날짜(ET)에 여러 적격 모델이 Humanity’s Last Exam 결과에 추가되면 HLE Accuracy가 가장 높은 모델을 판정에 사용한다. 최초 적격 모델이 처음 표시된 날짜 다음 달력 날짜에 결과에 추가된 모델은 고려하지 않는다. 적격 모델은 https://agi.safe.ai/의 Humanity’s Last Exam 결과에 새로 추가되어야 한다. 해당 모델이 사이트에 표시되기 전에 이미 출시되었거나, 공개적으로 이용 가능했거나, 베타 상태였거나, 그 밖의 방식으로 이용 가능했는지는 이 시장에서 중요하지 않다. 이 시장의 판정 출처는 https://agi.safe.ai/에 있는 공식 Humanity’s Last Exam 웹사이트다. 적격 모델이 사이트에 처음 표시된 날짜 다음 달력 날짜의 12:00 PM ET에 이 판정 출처를 이용할 수 없는 경우, 모델의 HLE Accuracy를 사이트에서 확인할 수 있게 되는 최초의 이후 시점을 기준으로 이 시장을 판정한다. 적격 모델이 사이트에 처음 표시된 후 7일째가 끝날 때까지 계속 이용할 수 없거나, December 31, 2026, 11:59 PM ET까지 적격 모델이 추가되지 않으면 이 시장은 "No"로 판정된다.

영문 원제목: Next Google Gemini Pro Model: Humanity’s Last Exam Debut?