IT집(Space) 10월 9일자 소식, 현지 시간 8일 AI 모델 평가 플랫폼 Arena 아레나가 2억 달러(IT之家 참고: 현재 환율로 약 13.43억 위안) 규모의 B 라운드 투자 유치를 완료했다고 발표했다.기업가치가 31억 달러에 달한다(현재 환율로 약 208.17억 위안에 해당). Arena는 원래 캘리포니아 대학교 버클리의 2023년 연구 프로젝트로, 대중 투표를 통해 AI 모델의 순위를 매긴다.
Arena는 이전에 올해 6월 연간 환산 매출이 1억 달러(현 환율로 약 6.72억 위안)에 달했다고 밝힌 바 있습니다.
이번 라운드는 광속창투(Lightspeed Venture Partners)와 Khosla Ventures가 공동 주도했으며, Salesforce Ventures, 01 Advisors, Dell Technologies Capital, Endeavor Catalyst, a16z, Felicis 등의 기관이 투자에 참여했습니다.
올해 1월, Arena는 1.5억 달러(현 환율로 약 10.07억 위안) 규모의 A 라운드 투자 유치를 완료한 바 있으며,투자 후 기업가치 17억 달러（현재 환율로 약 114.16억 위안), 당시 연간 매출은 3,000만 달러(현재 환율로 약 2.01억 위안)였다. 약 10개월 만에 Arena의 기업가치는 거의 두 배에 가깝게 상승했다.
Arena의 평가 플랫폼개인 사용자에게 무료로 개방. 사용자는 프롬프트를 입력하거나 AI에게 자신의 요구 사항에 따라 프로그램을 작성하고 프로젝트를 개발하도록 한 뒤, 서로 다른 모델의 완성 결과를 비교하고 점수를 매길 수 있다. Arena는 이 플랫폼이 매달 수천만 명의 방문자를 유치한다고 밝혔다.
작년 9월, Arena는 AI 모델 개발 기관과 기업을 대상으로 하는 상업 서비스 AI Evaluations를 출시하여 커뮤니티 사용자의 피드백 데이터를 활용해 상세한 모델 성능 분석을 제공했습니다.
올해 AI 연구개발 기관은 자사 모델이 다음을 통해 할 수 있음을 발견했다.벤치마크 규칙에 맞추기높은 점수를 받았더라도 그에 상응하는 실제 능력을 갖추고 있지 않을 수 있습니다. 기업들도 더 이상 표준화 시험 성적에 만족하지 않고, 어떤 모델이 자신의 비즈니스 요구에 더 적합한지 알고 싶어합니다.
Arena는 투자 유치 공고에서 "AI의 발전 속도가 이미 우리의 평가 능력을 초과했습니다. 모델이 자신이 테스트를 받고 있음을 알아차리면 고정된 벤치마크는 무력화됩니다. 세계는 AI가 실제 사용에서 안전하고 인간의 기대에 부합하게 행동하는지 검증할 중립적인 제3의 기관을 필요로 합니다. Arena가 이 역할을 맡기 시작했습니다."라고 밝혔습니다.
이를 위해 Arena는 리더보드에서정렬 능력 평가가 새로 추가되었습니다모델이 사용자가 요청하지 않은 작업을 임의로 수행하는지, 말이나 사실을 잘못된 출처에 귀속시키는지, 그리고 작업을 완료했다고 거짓말하는지를 중점적으로 살펴봅니다. Arena는 마지막 행동을 '기만적 완료(deceptive completion)'라고 부릅니다.
초기 발표된 정렬 능력 순위에서 OpenAI의 여러 모델이 상위권을 차지했으며, Claude Opus 5.5는 6위, Claude Fable은 9위를 기록했습니다.