지금은 인공지능 시대(지인시) 심볼지금은 인공지능 시대
커뮤니티 소식

ICLR 2027 대학별 순위 등장…소속 확인은 논문의 4분의 1~3분의 1

서아람글 · 서아람
ICLR 2027 초기 심사 점수와 기관별 논문 집계 지표를 국가별로 정리한 비교표
ICLR 2027 초기 심사 점수와 기관별 논문 집계 지표를 국가별로 정리한 비교표
ICLR 2027 초기 심사 점수를 대학별로 줄 세운 표가 레딧 r/MachineLearning에 등장하면서, AI 연구 경쟁이 대학 리그처럼 소비되는 장면이 펼쳐졌다. 게시자 No-Lab4175는 OpenReview에서 점수를 수집하고 논문 제목을 arXiv와 대조한 뒤, OpenAlex로 소속 기관을 연결했다고 설명했다. 최종 채택 결과가 아닌 초기 평가를 재가공한 비공식 집계로, 핵심은 어느 대학이 앞섰느냐보다 어떤 논문이 순위에 들어왔느냐다. 댓글에는 KAIST를 반기는 반응과 함께, 대학들이 박사과정 학생을 선수처럼 거래하겠다는 농담까지 나왔다. 그러나 다른 이용자들은 공동연구의 실적을 어디에 배분하는지, arXiv와 연결되지 않은 논문은 얼마나 되는지부터 물었다. 학술 데이터를 해석할 때 표본의 대표성과 집계 기준을 먼저 따지는 연구자들의 일반적인 검증 관점이 이 질문들에 담겨 있다.
  • 포착 범위: 게시자가 밝힌 소속 연결 비율은 전체의 약 4분의 1~3분의 1로, 상당수 논문은 대학별 비교에서 빠져 있다.
  • 점수 차이: 게시자는 연결된 표본의 평균이 2.19점, 전체 평균이 2.02점이라며 차이가 크지 않다고 설명했다.
  • 실적 배분: 논문 한 편을 여러 대학에 각각 한 편씩 더하지 않고, 저자와 소속 수에 따라 나눠 합계가 1이 되도록 했다.
게시자가 든 예에서는 저자 3명 가운데 한 명이 칭화대와 MIT에 동시 소속이고 나머지 두 명은 MIT 소속이다. 이때 MIT에는 6분의 5편, 칭화대에는 6분의 1편이 배정되므로 표에 소수점 논문 수가 등장해도 계산 오류는 아니다. 다만 이 방식은 소속별 몫을 나누는 규칙이지, 실제 연구 기여도나 연구비 부담을 측정한 결과는 아니다. 평균 차이가 0.17점에 불과하니 순위도 참고할 만하다는 반론은 가능하다. 하지만 전체 평균이 비슷하다는 사실만으로 대학마다 누락 비율과 누락된 논문의 수준까지 비슷하다고 보장할 수는 없다. 사전 공개가 활발한 연구실과 그렇지 않은 연구실이 섞여 있다면, 이 표에는 연구 성과뿐 아니라 공개 관행의 차이도 반영될 수 있다. 따라서 한국 독자가 KAIST의 경쟁력을 읽어내려면 해당 기관의 연결된 논문 수와 전체 제출 규모부터 함께 확인해야 한다. 이번 게시물은 익명 심사 논문을 공개 사전논문과 연결할 수 있다는 논쟁과도 맞닿지만, 더 직접적인 쟁점은 불완전한 데이터가 정밀한 순위처럼 보인다는 데 있다. 소속을 추정할 수 있다는 사실이 곧 심사위원의 편향이나 특정 대학의 우대를 입증하지는 않는다. AI 기업이 채용 대상 연구실이나 산학협력 파트너를 찾을 때 이런 표를 활용한다면, 초기 점수와 기관 이름만으로 후보를 좁히는 판단은 성급하다. 논문의 기술적 기여, 재현 가능성, 최종 심사 결과를 함께 확인해야 연구 역량에 대한 평가가 단단해진다. 다음에 공개될 분석에서 주목할 것은 순위 변동보다 기관별 연결률과 표본 규모, 집계 코드의 재현 가능성이다. 출처: 레딧 원문과 작성자 설명
인사이트

공개 데이터로 만든 대학 순위에는 연구 역량과 데이터에 포착되기 쉬운 정도가 함께 반영될 수 있다. 기관별 누락 규모를 모르는 상태에서는 정교한 실적 배분도 대표성 문제를 해결하지 못한다.

자주 묻는 질문

이거 ICLR이 공식 발표한 대학 순위야?
아니다. 레딧 게시자가 OpenReview의 초기 심사 점수를 수집하고 arXiv와 OpenAlex를 연결해 만든 비공식 집계다. 최종 채택 실적이나 학회가 인증한 대학 평가와는 다르다.
논문 수가 왜 소수점으로 나와?
공동연구 논문 한 편의 실적을 저자와 소속 수에 따라 기관별로 나눴기 때문이다. 게시자의 예에서는 저자 3명 중 한 명이 MIT·칭화대 겸임이고 두 명이 MIT 소속일 때, MIT에 6분의 5편과 칭화대에 6분의 1편을 배정한다.
평균 점수가 비슷하면 순위도 믿어도 되는 거 아냐?
게시자가 밝힌 연결 표본의 평균은 2.19점, 전체 평균은 2.02점이지만 이 차이만으로 대학별 순위의 신뢰성을 판단할 수는 없다. 소속이 연결된 논문은 전체의 약 4분의 1~3분의 1이며, 대학별 누락 비율과 누락 논문의 점수 분포를 추가로 확인해야 한다.
공유XTelegram

이 기사 어땠어요?

피드백을 남겨주시면 더 나은 맞춤 추천을 만듭니다.

이런 뉴스를 매일 받아보세요

매일 아침 7시, 그날의 정리를 이메일과 Telegram으로 받아보세요.