AI가 쓴 논문 심사평이 사람 전문가의 심사평보다 거의 모든 항목에서 높은 평가를 받았다는 연구 결과가 나왔습니다. 같은 시기에 Springer Nature와 Google DeepMind는 AI peer review(동료 심사) 보조 도구를 함께 설계하겠다고 발표했습니다. 반대편에서는 AI가 지어낸 논문이 학술지 심사 단계에서 걸러지고, AI가 만들어 낸 가짜 판례를 논문에 넣은 학생의 제적이 법원에서 확정되는 일도 있었습니다. 이번 주 학계 AI 소식은 'AI가 연구와 심사를 얼마나 맡을 수 있는가'와 '그 결과에 누가 책임지는가'라는 두 질문으로 모입니다. 비교 실험 결과를 먼저 보고, 연구자가 지금 무엇을 경계하고 어떻게 활용하면 되는지 정리합니다.
AI 심사가 사람 심사를 앞섰다는 비교 실험
이번 주 가장 눈에 띄는 소식은 AI가 만든 논문 심사평과 사람 전문가의 심사평을 짝지어 비교한 연구입니다. 연구는 134쌍의 논문 심사평을 놓고 어느 쪽이 더 나은지 순위를 매겼습니다. 판정은 AI 심판과 사람 학술지 편집자가 각각 맡았습니다.
| 판정 주체 | AI 심사평이 이긴 비율 |
|---|---|
| AI 심판 | 100% |
| 사람 학술지 편집자 | 87~100% |
항목별로 보면 AI 심사평은 참고 문헌, 약점 지적, 방법론, 논문의 틀 잡기, 전달력에서 사람 전문가보다 유의하게 높은 점수를 받았습니다. AI가 조금 뒤처진 유일한 항목은 그림과 표 분석이었습니다. 다만 사람 심사자도 그림을 꼼꼼히 뜯어보는 데 자주 어려움을 겪는다는 점을 생각하면, 이 차이도 결정적인 약점으로 보기는 어렵다는 해석이 가능합니다.
이 결과와 맞물려 Springer Nature와 Google DeepMind는 AI peer review 보조 도구를 공동 설계하는 협력을 발표했습니다. 도구는 Google의 Gemini 모델과 ScholarReview agent 체계를 바탕으로 만들어집니다. 대형 출판사가 AI 심사 도구를 직접 만들겠다고 나선 것이어서, 비교 실험의 결과가 실제 심사 과정에 들어오는 시점이 생각보다 가까울 수 있습니다.
출판사가 AI 심사를 들이는 이유와 남는 불안
출판사 입장에서 AI 심사 도입은 비용을 줄일 수 있는 선택입니다. 이 때문에 사람 심사자가 심사 과정에서 점차 밀려날 수 있다는 걱정이 나옵니다. 사람 심사자가 완전히 빠지는 상황은 불편하지만, 흐름 자체는 막기 어려워 보입니다.
연구자가 당장 준비할 일은 분명합니다. 출판사 쪽에서 AI 심사 도구가 돌아간다고 가정하고, 방법론과 출처 인용, 형식을 빈틈없이 기록해 두는 것입니다. AI 심사가 참고 문헌과 방법론, 약점 지적에서 특히 강하다는 점을 떠올리면, 바로 그 부분이 가장 먼저 걸러지는 곳이 될 가능성이 큽니다.

▲ 가짜 논문의 초기 심사 거절
가짜 논문은 아직 걸러진다
AI 심사가 사람을 앞선다는 소식만 보면 'AI로 논문을 통째로 만들어 내도 통하지 않을까' 하는 생각이 들 수 있습니다. 그 가능성을 직접 시험한 사례가 있습니다. 한 기술 전문 기자가 IEEE Spectrum에 실은 실험으로, vibe coding(AI에 맡겨 느낌대로 코드를 만드는 방식)이라는 말을 빌려 'vibe-researching'을 해 본 것입니다.
기자는 ChatGPT와 Gemini 같은 LLM으로 사람의 개입을 최소화한 채 가짜 원고 두 편을 만들었습니다. 첫 번째는 실제로 하지 않은 연구를 서술한 완전한 위조 논문이었고, 두 번째는 한 회사의 자동 연구 시스템으로 만든 계산 연구 논문이었습니다. 두 편을 IEEE Access에 투고한 결과, 둘 다 peer review에 들어가기 전 초기 심사 단계에서 거절됐습니다.
이 결과는 기존 편집 심사 장치가 순수하게 LLM이 지어낸 투고를 아직 걸러낼 수 있다는 점을 보여 줍니다. 'AI가 과학을 통째로 만들어 낸다'는 과장은 현실과 거리가 있고, 실제 데이터 없이 prompt만으로 만든 연구는 입구에서 막힌다는 뜻으로 읽힙니다.
지어낸 인용은 그 자체로 부정행위: Dubai 법원 판결
AI 사용의 책임이 누구에게 있는지 보여 주는 판결도 나왔습니다. University of Birmingham Dubai 캠퍼스의 Birmingham Law School에서 국제 분쟁 해결 법학 석사 과정에 다니던 한 학생이 AI로 만든 논문을 제출했다가 제적된 사건입니다. 2024년 2월 8일자 조사 보고서에 따르면 학생은 AI가 만든 내용을 그대로 복사해 붙였고, 그 안에는 존재하지 않는 판결, 잘못된 법률 인용, 가짜 참고 문헌이 들어 있었습니다.
학생은 복학과 학위 수여, Dh10만의 손해 배상을 요구하며 소송을 냈고, AI 탐지 소프트웨어는 믿을 수 없다고 주장했습니다. 소송은 다음과 같이 진행됐습니다.
| 날짜 | 법원 | 결과 |
|---|---|---|
| 2025년 2월 10일 | Dubai 1심 법원 | 소송 기각 |
| 2026년 7월 30일 | Dubai 항소 법원 | 기각 유지 |
| 2026년 10월 29일 | Dubai Court of Cassation | 최종 기각 |
법원의 논리는 단순합니다. AI 탐지 소프트웨어가 믿을 만한지와 상관없이, 존재하지 않는 판례와 지어낸 인용이 논문에 실제로 들어 있다는 사실 자체가 학문적 부정행위를 독립적으로 입증한다는 것입니다. AI 탐지기의 정확도를 둘러싼 논쟁은 이 사건에서 법적으로 의미가 없었습니다. AI의 도움을 받아 쓴 글이라도 인용과 주장을 검증할 책임은 전적으로 연구자와 학생 본인에게 있다는 점이 다시 확인된 셈입니다.
agent를 몇 개까지 다룰 수 있나
AI agent(스스로 작업을 수행하는 AI)를 여러 개 동시에 부리는 작업 방식이 늘고 있지만, 사람의 인지 능력에는 한계가 있다는 연구 결과도 있습니다. The Chronicle of Higher Education의 글은 AI 사용이 '뇌 과부하(brain fry)'를 일으키는지 다루면서, 여러 agent를 동시에 관리할 때 생기는 맥락 전환 피로가 사람의 멀티태스킹에서 잘 알려진 인지 부담과 닮아 있다고 짚었습니다.
| 동시에 관리하는 agent 수 | 생산성 변화 |
|---|---|
| 1개 | 크게 상승 |
| 2개 | 소폭 상승 |
| 3개 이상 | 급격히 하락 |
연구자에게 주는 시사점은 분명합니다. 기본은 주력 agent 하나로 일하고, 컨디션이 좋을 때 최대 두 개까지만 늘리며, 그 이상의 다중 agent 구성은 피하는 것이 좋습니다.

▲ 다중 agent 관리의 인지 과부하
Claude Duet, 알아서 일하고 중요한 결정 전엔 묻는 agent
Anthropic은 Claude Duet의 연구 미리보기를 공개했습니다. 수동적인 도구가 아니라 사용자 옆에서 함께 일하는 능동적이고 지속적인 비서로 설계된 제품입니다. 사용자가 무엇을 필요로 할지 미리 예상하고, 사용자가 자리를 비운 동안에도 뒤에서 작업을 이어 가며, 중요한 결정을 실행하기 전에는 먼저 확인을 받습니다.
Claude Duet은 Claude Opus 3.5로 구동되며, iOS와 Android, 웹에서 독립 앱 형태로 제공됩니다. 이용 대상은 Pro, Max, Ultra 구독자입니다. 안전장치로는 자동 모드 분류기와 자격 증명 보호 기능이 들어갔는데, Claude Code와 Claude in Chrome에서 쓰던 틀을 가져와 허가 없는 파일 삭제나 조작을 막도록 했습니다. 공개 페이지에는 2026년 10월 21일이 발표일로 적혀 있습니다.
연구자 입장에서는 자리를 비운 동안에도 이어져야 하는 행정 업무나 연구 자료 정리에 이런 지속형 agent가 쓸모 있을 것으로 보입니다. 다만 앞서 본 인지 부담 연구를 떠올리면, 이런 도구도 하나를 깊게 쓰는 편이 여럿을 동시에 띄우는 것보다 나을 가능성이 큽니다.
자율 실험실 AutoDNA와 수능 스마트 안경 단속
실험실 쪽에서는 Nature에 AutoDNA 논문이 실렸습니다. 자율적인 생체 분자 실험을 위해 처음부터 AI 중심으로 설계한 실험실입니다. AutoDNA는 20종이 넘는 과학 장비를 11,000단계 이상의 작업에 걸쳐 스스로 조율하며 핵산 합성, 전사, 증폭, 시퀀싱을 수행했습니다. DNA 데이터 저장 주기 실행 속도는 3.2배 빨라졌고, KRAS G12D 변이 치료법 검증도 사람의 개입을 최소화한 채 해냈습니다. 이런 자율 실험실은 연구자의 자리를 없애기보다 반복적이고 지치는 손작업을 대신 맡는 방향으로 연구 일을 바꿀 것으로 보입니다. 치료법 검증 결과는 연구 단계의 성과이며, 건강에 관한 판단은 의료진과 상의해야 합니다.
시험장에서는 반대 방향의 소식이 있었습니다. 교육부는 대학수학능력시험에서 AI 스마트 안경을 이용한 부정행위를 강력히 단속하겠다고 발표했습니다. 초소형 카메라와 디스플레이가 달린 스마트 안경은 시험 문제를 AI 모델에 보내고 답을 실시간으로 렌즈에 띄울 수 있습니다. 기존에는 부정행위가 적발되면 시험 무효와 1년 응시 제한이었지만, 새 규정은 3년 응시 제한과 형사 처벌까지 확대했습니다. 전국 1,312개 시험장에 감독관이 배치되어 의심스러운 안경을 검사합니다.
연구자가 지금 할 일
이번 주 소식을 한 줄로 줄이면, AI는 심사와 실험을 빠르게 넘겨받고 있지만 결과의 책임은 여전히 사람에게 남는다는 것입니다. 연구자가 바로 실천할 수 있는 일은 다음과 같습니다.
- AI로 만든 문헌 검토나 원고는 인용, 판례, 통계 수치를 하나씩 원문과 대조한 뒤에만 제출합니다. 지어낸 인용은 탐지기와 무관하게 그 자체가 부정행위 증거입니다.
- AI는 추론과 종합을 돕는 데 쓰고, 연구 전체를 prompt로 지어내려 하지 않습니다. 그런 원고는 입구에서 걸러집니다.
- 출판사 쪽 AI 심사를 가정하고 방법론, 출처, 형식을 꼼꼼히 기록해 둡니다.
- 동시에 다루는 agent는 하나, 많아야 둘로 제한합니다.
- 자리를 비운 사이에도 이어져야 하는 행정·정리 업무에는 Claude Duet 같은 지속형 agent를 검토해 봅니다.


