연구노트소르테크
이해하는 AI에서 완수하는 AI로
병원 업무 후보 50개를 조사하며 생각한 AI 자동화의 설계 과제 AI가 진료 의뢰서를 읽고 필요한 정보를 추출했다. 화면에는 항목별로 정리된 결과가 나타난다. 데모에서는 꽤 그럴듯한 장면이다. 그런데 이 결과를 받은 담당자의 일은 끝났을까? 추출된 내용을 확인하고, 기존 시스템에 입력…
카테고리 연구노트
연구노트인제대
WAA(Windows Agent Arena) LeaderBoard - WAA 리더보드
개요 원본 WAA와 WAA-V2는 태스크와 evaluator가 다르므로 분리해서 봅니다. 같은 표에서 섞어 최고점을 비교하면 안 됩니다. 아래 표는 각 결과를 step budget(15/30/50/100), run type(단일 실행 · best-of-N · pass@N · select…