eval평가

eval은 evaluation의 줄임말로, AI 모델이나 AI agent에 정해진 과제를 풀게 하고 그 결과를 채점해 성능을 수치로 확인하는 평가를 가리킨다. 여러 과제를 묶은 평가 묶음을 뜻하기도 한다.

AI 개발에서는 모델이나 prompt, agent 구성을 바꿀 때마다 같은 eval을 다시 돌려 개선 여부를 비교하고, 실패한 과제를 분석해 고칠 곳을 찾는 데 쓴다. 공개된 표준 평가인 benchmark와 달리, 특정 제품이나 업무에 맞춰 자체적으로 만드는 경우가 많다.

이 설명은 AIPOST 기사와 널리 알려진 사실을 바탕으로 정리했습니다. 잘못된 내용이 있으면 정정 요청으로 알려 주세요.