JIINSI
커뮤니티 소식

AI 논문 심사 '침묵의 벽'에 연구자들 좌절: 리버탈 답변 없는 현실

서아람글 · 서아람
수많은 연구 논문이 쌓여있는 모습. 인공지능 분야의 급성장으로 논문 제출 건수가 폭증하며 학술 심사 과정에 과부하가 걸리고 있다.
수많은 연구 논문이 쌓여있는 모습. 인공지능 분야의 급성장으로 논문 제출 건수가 폭증하며 학술 심사 과정에 과부하가 걸리고 있다.
최근 온라인 커뮤니티 X와 레딧의 머신러닝(r/MachineLearning) 게시판에서 인공지능 연구자들의 집단적인 좌절감이 터져 나왔습니다. 논문 동료 심사 과정 중 저자들이 심사위원(Reviewer)이나 영역 의장(Area Chair, AC)에게 보낸 리버탈(Rebuttal, 반박문)에 대한 답변을 받지 못하는 사례가 빈번하다는 내용이었습니다. 한 연구자는 논의 기간이 시작되기 훨씬 전에 제출한 리버탈에 대해 어떤 심사위원이나 AC도 응답하지 않는다고 토로하며, 이러한 상황에서 어떻게 대처해야 할지 조언을 구했습니다. 이는 비단 한 개인의 문제가 아니라, 인공지능 학계 전반에 퍼져 있는 고질적인 피로감과 불공정성 논란을 수면 위로 끌어올린 단면입니다. 인공지능 분야의 논문 심사는 연구자 커리어의 중대한 관문입니다. 세계적인 학회인 신경정보처리시스템학회(NeurIPS), 국제 머신러닝 학회(ICML), 국제 학습 표상 학회(ICLR) 등에 논문을 게재하는 것은 연구 성과를 인정받고, 연구비를 확보하며, 심지어는 새로운 직업 기회를 얻는 데 결정적인 역할을 합니다. 이러한 학회들의 동료 심사 과정은 주로 다음과 같이 진행됩니다.
  • 논문 제출: 저자가 연구 결과를 정리하여 학회에 논문을 제출합니다.
  • 심사: 2~4명의 심사위원이 논문의 독창성, 기술적 완성도, 기여도 등을 평가하고 피드백을 제공합니다.
  • 리버탈: 심사위원의 피드백에 대해 저자가 질문에 답하고 논문의 미흡한 부분을 해명하거나 반박하는 시간을 갖습니다.
  • 논의 및 최종 결정: 심사위원과 AC가 리버탈을 바탕으로 최종 논의를 거쳐 논문 게재 여부를 결정합니다.
문제는 바로 리버탈 단계에서 발생합니다. 저자들은 심사위원의 지적 사항에 대해 수많은 밤을 새워가며 논리적으로 반박하고 추가 실험 결과를 제시하지만, 정작 심사위원이나 AC로부터 아무런 피드백을 받지 못하는 경우가 많다는 것입니다. 이는 저자들의 입장에서는 해명할 기회조차 박탈당하는 것으로, 불합리한 결정으로 이어질 수 있다는 불안감을 증폭시킵니다. 이러한 현상이 발생하는 원인은 복합적입니다. 가장 큰 이유는 인공지능 분야의 폭발적인 성장으로 인해 논문 제출 건수가 기하급수적으로 늘어난 반면, 심사위원 수는 그에 비례하여 증가하지 못했기 때문입니다. 심사위원들은 대부분 다른 연구자들과 마찬가지로 자신의 연구와 교육, 행정 업무에 시달리는 자원봉사자들입니다. 방대한 양의 논문을 심사하고, 리버탈까지 꼼꼼히 확인하고 답변하는 것은 물리적으로 어려운 일일 수 있습니다. 또한, 일부 심사위원은 피드백 작성에 익숙하지 않거나, 의도적으로 답변을 회피하기도 합니다. 실제로 많은 연구자가 심사위원들의 심사 품질이 저하되고 있다는 지적을 꾸준히 제기하고 있습니다. 물론, 일부에서는 저자들의 리버탈이 충분히 설득력 있지 않거나, 핵심 쟁점을 벗어난 경우가 있을 수 있다고 지적합니다. 모든 리버탈에 일일이 답변하는 것이 비효율적일 수 있다는 시각도 존재합니다. 그러나 설령 리버탈의 내용이 미흡하더라도, 최소한의 피드백이나 답변을 통해 저자들이 자신의 논문이 왜 받아들여지지 않았는지 명확히 이해할 수 있도록 돕는 것이 공정한 심사 과정의 필수 요소라는 데에는 이견이 없습니다. 이러한 '침묵의 벽'은 저자들의 사기를 저하시키고, 연구의 투명성을 해치며, 궁극적으로는 학술 생태계의 건전한 발전을 저해합니다. 학계에서도 이러한 문제점을 인지하고 개선 노력을 기울이고 있습니다. 일부 학회는 심사위원의 부담을 줄이기 위해 심사 의무를 명확히 하거나, 리버탈 이후 심사위원의 필수 코멘트 작성을 의무화하는 등의 정책을 도입하고 있습니다. 또한, 인공지능 기술을 활용하여 심사위원 배정을 최적화하거나, 리버탈 내용 요약에 도움을 주는 연구도 진행 중입니다. 하지만 근본적인 해결을 위해서는 심사위원들에게 적절한 보상과 인센티브를 제공하여 참여를 독려하고, 심사 품질을 높이는 교육 프로그램을 강화하는 등 시스템적인 개선이 꾸준히 이루어져야 할 것입니다. 연구자들의 좌절감은 단순한 불평을 넘어, 인공지능 학술 시스템의 지속 가능성에 대한 중요한 경고음으로 받아들여야 합니다.
인사이트

AI 논문 심사 과정에서 리버탈에 대한 심사위원의 무응답은 연구자들의 사기를 저하시키고 학술 시스템의 공정성을 해치는 심각한 문제로, 인공지능 학계의 지속 가능한 발전을 위해 시스템적인 개선이 시급합니다.

자주 묻는 질문

AI 논문 심사에서 리버탈에 답변이 없는 경우가 정말 흔한가요?
네, 매우 흔한 현상으로, 특히 제출 논문 수가 많은 주요 인공지능 학회에서 빈번하게 발생합니다. 많은 연구자가 이러한 '침묵의 벽' 때문에 좌절감을 겪고 있습니다.
심사위원이나 AC는 왜 리버탈에 답변을 해주지 않는 건가요?
가장 큰 이유는 급증하는 논문 수 대비 심사위원들의 과중한 업무 부담 때문입니다. 이들은 대부분 자원봉사자이며, 자신의 연구와 다른 업무로 인해 충분한 시간을 할애하기 어려운 경우가 많습니다.
학계에서는 이러한 문제를 해결하기 위해 어떤 노력을 하고 있나요?
일부 학회는 심사 과정의 투명성을 높이기 위해 심사 가이드라인을 강화하거나, 심사위원의 필수 피드백 작성을 의무화하는 정책을 도입하고 있습니다. 장기적으로는 심사위원 인센티브 강화 및 AI 기술을 활용한 심사 효율화 방안도 모색 중입니다.
공유XTelegram

이 기사 어땠어요?

피드백을 남겨주시면 더 나은 맞춤 추천을 만듭니다.

이런 뉴스를 매일 받아보세요

매일 아침 7시, 그날의 정리를 이메일과 Telegram으로 받아보세요.