LLM
Arena, 1,000만 모델 투표를 $100M 평가 사업으로 전환
무료 리더보드로 알려진 Arena가 상용 서비스 출시 8개월 만에 연환산 매출 $100M에 도달했다. 1,000만 건 넘는 사용자 평가가 모델 랩과 기업의 post-training 예산으로 바뀌는 흐름이다.
1분 소요 27 조회
태그
#evaluations
#evaluations 태그가 달린 기사
AI X/Twitter
Google DeepMind, AGI 평가를 글로벌 Kaggle 챌린지로 확장
Google DeepMind는 X에서 20만 달러 상금 규모의 Kaggle hackathon을 열어 AI용 새로운 cognitive evaluation을 만들겠다고 밝혔다. 연결된 Google 글은 이 노력이 단일 benchmark가 아니라 10개의 cognitive ability 전반에서 AGI 진행 상황을 측정하려는 더 큰 프레임워크의 일부라고 설명한다.
1분 소요 43 조회
LLM
Anthropic, AI-resistant 기술 평가 설계 공개…채용 테스트 재설계 과정 공유
Anthropic은 2026년 1월 21일 게시물에서 AI 성능 향상에 맞춰 채용용 기술 과제를 여러 차례 개편한 과정을 공개했다. Claude Opus 4와 Opus 4.5가 기존 과제를 빠르게 해결한 사례를 바탕으로 평가 방식 자체를 재설계했다고 설명했다.
1분 소요 41 조회