기사 검색

이슈부터 IT·AI·연예·게임까지, 메타브리프의 기사를 찾아보세요.

AI

Claude Fable 5.2 (Max), LMArena 이미지 이해 부문 첫 집계서 10위… 상위 10개 중 8개 앤트로픽


앤트로픽의 AI 모델 Claude Fable 5.2 (Max)가 LMArena 이미지 이해(비전) 부문 리더보드에 처음 집계되면서 바로 10위에 올랐다. LMArena가 11월 19일 공개한 리더보드 자료에 따르면, 이 모델은 1,176표를 받았다.


LMArena는 예전에 'Chatbot Arena'라는 이름으로 알려진 AI 모델 평가 플랫폼이다. 이용자는 어떤 모델인지 모르는 상태에서 두 모델의 답변을 비교해 더 나은 쪽에 투표한다. 이 투표를 모아 순위를 매긴다. 비전 부문은 이미지를 이해하는 능력만 따로 겨루는 부문이다.


이번 비전 부문 상위 10위는 거의 앤트로픽 모델로 채워졌다. 1위는 Claude Fable 5 (High), 2위는 Claude Fable 5.1 (Max), 3위는 Claude Opus 5.5 (High)다. 4위 Claude Opus 4.7과 5위 Claude Opus 5 (High)까지 1~5위가 모두 앤트로픽 모델이다. 6위에는 구글의 Gemini 3.8 Flash (High)가 올랐다. 이어 7위 Claude Opus 4.6 (High), 8위 Claude Opus 4.7 (High), 9위 구글 Gemini 3.7 Flash (High)가 자리했다. 10위가 이번에 새로 들어온 Claude Fable 5.2 (Max)다. 10개 자리 가운데 앤트로픽이 8개, 구글이 2개를 차지했다.


눈에 띄는 점은 Fable 계열의 순위가 버전 번호와 반대라는 것이다. 번호가 가장 높은 Fable 5.2 (Max)는 10위지만, 이전 번호인 Fable 5 (High)는 1위, Fable 5.1 (Max)는 2위다. 같은 이름이라도 괄호 안에 'High'나 'Max'가 붙으면 리더보드에서 따로 집계된다. 그래서 괄호 표기가 없는 Claude Opus 4.7은 4위, Claude Opus 4.7 (High)는 8위로 순위가 나뉘었다.


순위를 해석할 때는 주의할 점이 있다. LMArena 순위는 투표 결과로 추정한 Elo 계열 점수를 바탕으로 하며, 이 점수에는 오차 범위가 있다. 그래서 점수 차가 작으면 순위가 달라도 실제 성능 차이가 있다고 단정하기 어렵다. 같은 순위가 나오는 것은 LMArena가 통계적으로 두 모델을 구분하지 못했다는 뜻이다. Fable 5.2 (Max)의 결과도 10위라는 숫자 하나보다, 처음 집계되자마자 상위 10위 안에 들었다는 점에 의미가 있다.


사진이나 도표처럼 이미지를 다루는 작업에 AI를 쓰려는 이용자에게 이번 순위는 참고할 만한 자료다. 다만 사람들의 선호 투표로 매긴 순위이기 때문에, 특정 과제의 정답률을 재는 시험 점수와는 성격이 다르다. 부문 전체로 보면 이미지 이해 분야 상위권은 앤트로픽의 Fable·Opus 계열과 구글의 Gemini Flash 계열이 나눠 가진 모습이다.


이번 자료는 LMArena가 공개한 리더보드 데이터셋(lmarena-ai/leaderboard-dataset)에서 나왔으며, CC BY 4.0 라이선스로 배포된다.


앞서 보도한 기사
Fable 5.2 나왔다…앤트로픽, 클로드 코드에서 작업별 모델 고르는 법 안내