Artificial Analysis Articles수정일

AA-3D 발표: 대화형 3D 경험을 구축하는 AI 모델을 위한 벤치마크

상세한 장면이 더 많은 표를 얻으며, 더 강한 모델이 그러한 장면을 만듭니다 각 태스크에서 가장 세밀한 다섯 분의 일 장면들은 스크린샷 크기가 두 배(168 KB 대 84 KB)이고 빈 부분은 삼분의 일 수준(22% 대 60%)입니다. 이들은 투표의 63%를 얻는 반면, 가장 덜 세밀한 다섯 분의 일은 31%를 얻습니다. 모델들의 Elo만으로도 61%와 3

상세한 장면이 더 많은 표를 얻으며, 더 강한 모델이 그러한 장면을 만듭니다

각 태스크에서 가장 세밀한 다섯 분의 일 장면들은 스크린샷 크기가 두 배(168 KB 대 84 KB)이고 빈 부분은 삼분의 일 수준(22% 대 60%)입니다. 이들은 투표의 63%를 얻는 반면, 가장 덜 세밀한 다섯 분의 일은 31%를 얻습니다. 모델들의 Elo만으로도 61%와 33%를 예측할 수 있으므로, 세밀한 장면들은 주로 더 강한 모델들에서 나옵니다. 이 데이터만으로는 세밀함이 그 모델들의 강함의 일부인지 여부를 보여줄 수 없습니다. 하나의 모델 내에서는 효과가 작습니다: 해당 모델의 다른 장면들보다 표준편차 하나만큼 더 세밀한 장면은 자신의 투표 중 약 1.5포인트 더 많이 이깁니다(세부 측정 방식에 따라 1.3에서 1.8). 86개의 장면 측정 지표 중 11개가 보정을 통과했습니다: 세부 측정 지표들, 렌더 해상도와 안티앨리어싱, 프레임당 GPU 시간, 그리고 페이지 요소 수입니다. 어떤 지표도 투표를 4포인트 이상 움직이지 못했습니다.

장면 상세도별 AA-3D 획득 표

모델들의 Elo가 예측하는 비율 대비 실제 획득 표 비율 · 2026년 10월 12일 기준 데이터각 작업 내 상세도 순위별 장면

세부함은 What Detail Measures에서 정의된 네 가지 스크린샷 측정 지표를 결합한 것입니다. 동일한 모델과 태스크 내에서 표준편차 하나만큼 더 세밀할수록 1.5포인트가 추가됩니다(p = 0.001, q = 0.011). 1,008개 장면, 투표 페이지에서 깨지는 23개는 제외.

원문 출처

Artificial Analysis Articles

내용 안내

원문 발행 및 권리는 출처에 있습니다.

기계 번역 · 원문을 참고하세요