Vals AI는 대규모 언어 모델(LLM)과 이를 바탕으로 한 AI 제품의 성능을 제3자 처지에서 평가하는 미국 기업이다. 2023년 설립됐고 본사는 캘리포니아주 샌프란시스코에 있다. 법률, 금융, 세무, 코딩 등 전문 업무 분야별 benchmark(성능 비교 시험)를 만들어 모델별 결과를 순위표로 공개한다.
모델 개발사가 직접 발표하는 점수와 별도로, 외부 기관으로서 같은 조건에서 여러 모델을 시험한다. 시험 문제가 모델의 학습 데이터에 섞이지 않도록 평가 데이터 일부를 비공개로 운영한다. 법률 AI 제품의 결과를 변호사의 결과와 견준 Vals Legal AI Report로도 알려져 있다.