보도자료소르테크
소르테크 × 인제대, WAA 리더보드 1위를 찍다 — 15-step 단일 실행 64.22%
이 글은 WAA(Windows Agent Arena) 리더보드 시리즈의 2번째 글입니다. 필드 전체 순위(원본 WAA / WAA-V2)는 이전 글에 정리돼 있고, 이 글은 그중 우리 실험을 자세히 다룹니다. TL;DR Windows Agent Arena(WAA) 154개 태스크를 처음부…
태그 #Windows Agent Arena
연구노트인제대
WAA(Windows Agent Arena) LeaderBoard - WAA 리더보드
개요 원본 WAA와 WAA-V2는 태스크와 evaluator가 다르므로 분리해서 봅니다. 같은 표에서 섞어 최고점을 비교하면 안 됩니다. 아래 표는 각 결과를 step budget(15/30/50/100), run type(단일 실행 · best-of-N · pass@N · select…