지금은 인공지능 시대(지인시) 심볼지금은 인공지능 시대
커뮤니티 소식

AI 3대 학회, 논문 1,000편만 뽑으면 더 좋아질까

서아람글 · 서아람
머신러닝 학회 포스터 발표장에서 연구자들이 논문 설명을 듣고 토론하는 모습
머신러닝 학회 포스터 발표장에서 연구자들이 논문 설명을 듣고 토론하는 모습
AI 학회마다 논문을 연간 1,000편만 채택하면, 정말 더 좋은 연구가 남을까? 레딧 r/MachineLearning의 이용자 Hope999991은 NeurIPS·ICML·ICLR에 이런 상한을 두자는 가정을 던졌다. 제공된 게시글은 투고 급증을 배경으로 품질 개선과 경쟁의 자의성 중 무엇이 커질지 묻는 토론 제안이며, 학회의 정책 발표는 아니다. 게시 시점과 댓글 반응은 확인되지 않았지만, 질문의 핵심은 분명하다. 학회가 보증하는 연구의 질과 학회 배지의 희소성이 과연 같은 것인가다. 규모를 가늠할 비교 기준으로 ICML 2025를 보면, 공식 자료상 메인 트랙 채택은 3,260편, 채택률은 27%, 심사자는 10,943명이었다. 여기에 1,000편 상한을 적용하면 채택 규모를 약 69% 줄이는 셈으로, 단순한 운영 조정이라고 보기 어렵다. ICML 공식 자료 쟁점은 다음 세 가지로 나뉜다.
  • 독자의 부담: 읽을 논문과 현장 발표가 줄어들면 관심을 집중하기 쉬워지고, 채택 논문 한 편의 노출 기회도 커질 수 있다.
  • 심사의 부담: 투고가 그대로라면 탈락시킬 논문까지 검토해야 하므로, 채택 상한만으로 심사자의 노동이 줄지는 않는다.
  • 경쟁의 기준: 기여도가 비슷한 논문 사이에서 정원을 맞춰야 한다면, 절대적인 품질보다 경계선에서의 판단 차이가 더 중요해진다.
이 우려에는 실제 실험 근거가 있는데, NeurIPS는 2021년 논문 882편을 독립된 두 심사위원회에 맡겼고 203편, 약 23%에서 채택 여부가 갈렸다. 당시 운영진은 현재 심사 방식에서 선발을 크게 좁히면 재심사 때 결과가 바뀌는 채택 논문의 비중도 커질 수 있다고 해석했다. NeurIPS 실험 보고 이는 심사가 무의미하다는 증거가 아니라, 전문가 평가에도 불확실성이 있어 촘촘한 순위를 매기는 데 한계가 있다는 뜻이다. 다만 오래된 특정 학회의 실험이므로, 오늘 세 학회에 1,000편 상한을 적용했을 때의 결과를 그대로 예측하는 수치로 쓰면 안 된다. 물론 문턱을 높여야 작은 성능 개선을 반복하는 논문이 줄고 연구자가 더 큰 문제에 집중한다는 반론은 설득력이 있다. 그러나 정원만 줄이고 평가 기준을 유지하면, 실패 위험이 큰 새로운 접근보다 심사자를 설득하기 쉬운 익숙한 주제로 쏠릴 가능성도 있다. 특히 학회 실적을 채용과 연구비 배분의 지표로 쓰는 조직에서는, 상한이 연구 생산성을 높이기보다 이미 자원과 투고 경험을 갖춘 팀의 경쟁 우위를 키울 수 있다. 한국의 대학 연구실과 AI 스타트업에도 이는 논문 숫자의 문제가 아니라 인재를 평가하고 연구 성과를 입증하는 비용의 문제다. 저자에게 의무를 더 주거나 심사 참여를 늘리자는 인접 논의와 연결되지만, 이 제안의 고유한 쟁점은 심사 역량을 늘리지 않고 최종 출구만 좁힌다는 데 있다. 앞으로 상한제의 효과를 따지려면 채택률뿐 아니라 재심사 일치도, 분야별 탈락 편중, 후속 재현 성과를 함께 봐야 하며, 독자의 관심을 모으는 목적이라면 우수 발표 선별과 논문 채택을 분리하는 방식부터 검토할 만하다.
인사이트

채택 정원을 줄이면 학회 배지는 희소해지지만, 심사의 정확도가 자동으로 높아지지는 않는다. 연구의 질을 높이려면 탈락 논문 수보다 좋은 연구를 일관되게 찾아내는 능력을 평가해야 한다.

자주 묻는 질문

진짜로 세 학회가 1,000편만 뽑겠다는 거야?
제공된 레딧 게시글은 NeurIPS·ICML·ICLR이 각각 연간 채택 논문을 1,000편으로 제한하면 어떨지 묻는 가상 제안이다. 이 게시글은 학회의 공식 정책 발표가 아니다.
적게 뽑으면 좋은 논문만 남는 거 아니야?
선발을 줄이는 것만으로 연구 품질이 높아진다고 단정할 수 없다. NeurIPS 2021년 실험에서는 같은 논문 882편을 독립적으로 심사했을 때 약 23%에서 채택 여부가 달랐으며, 이는 전문가 평가에도 판단 차이가 있음을 보여준다.
그래도 심사자 부담은 줄어들지 않아?
채택 상한은 최종 통과 논문 수를 제한하므로, 투고량이 같다면 검토해야 할 논문 수는 줄지 않는다. 발표 운영 부담은 낮아질 수 있지만, 심사 부담 감소는 투고량이나 심사 절차가 어떻게 바뀌는지에 달려 있다.
공유XTelegram

이 기사 어땠어요?

피드백을 남겨주시면 더 나은 맞춤 추천을 만듭니다.

이런 뉴스를 매일 받아보세요

매일 아침 7시, 그날의 정리를 이메일과 Telegram으로 받아보세요.