GSM8K

초등학교 수준의 수학 문장제 약 8,500개로 언어 모델의 다단계 수리 추론 능력을 재는 benchmark다.

기사 1편최근 언급

GSM8K(Grade School Math 8K)는 OpenAI 연구진이 2021년에 공개한 수학 문장제 데이터셋이다. 사람이 직접 쓴 초등학교 수준의 문제 약 8,500개로 이루어져 있으며, 각 문제는 기본 사칙연산을 2~8단계 거쳐야 풀린다. 문제마다 자연어로 쓴 단계별 풀이와 정답이 붙어 있다.

언어 모델의 다단계 수리 추론을 재는 benchmark(성능 비교 시험)로 널리 쓰였고, 풀이 과정을 단계별로 쓰게 하는 chain-of-thought를 비롯한 prompt 기법 연구에서 자주 평가 대상으로 쓰였다.

이 설명은 AIPOST 기사와 널리 알려진 사실을 바탕으로 정리했습니다. 잘못된 내용이 있으면 정정 요청으로 알려 주세요.

이 항목을 다룬 기사

  • prompt 최적화와 가중치 학습, AI agent에 무엇을 먼저 쓸까AI 성능 ·

    수학 문제 benchmark(성능 비교 시험)인 GSM8K에서 이 방식은 사람이 직접 쓴 풀이 예시를 앞서는 경우가 많았습니다.

    기사 읽기

설명이 잘못되었거나 찾는 항목이 없나요?

위키 설명은 AIPOST 기사와 널리 알려진 사실을 바탕으로 정리합니다. 잘못된 설명은 정정 요청으로 알려 주시면 확인해 고칩니다. 새 기사에 나온 이름은 기사가 올라온 뒤 위키에 더해집니다.