커뮤니티 소식
ICLR 2027 대학별 순위 등장…소속 확인은 논문의 4분의 1~3분의 1

ICLR 2027 초기 심사 점수를 대학별로 줄 세운 표가 레딧 r/MachineLearning에 등장하면서, AI 연구 경쟁이 대학 리그처럼 소비되는 장면이 펼쳐졌다.
게시자 No-Lab4175는 OpenReview에서 점수를 수집하고 논문 제목을 arXiv와 대조한 뒤, OpenAlex로 소속 기관을 연결했다고 설명했다.
최종 채택 결과가 아닌 초기 평가를 재가공한 비공식 집계로, 핵심은 어느 대학이 앞섰느냐보다 어떤 논문이 순위에 들어왔느냐다.
댓글에는 KAIST를 반기는 반응과 함께, 대학들이 박사과정 학생을 선수처럼 거래하겠다는 농담까지 나왔다.
그러나 다른 이용자들은 공동연구의 실적을 어디에 배분하는지, arXiv와 연결되지 않은 논문은 얼마나 되는지부터 물었다.
학술 데이터를 해석할 때 표본의 대표성과 집계 기준을 먼저 따지는 연구자들의 일반적인 검증 관점이 이 질문들에 담겨 있다.
- 포착 범위: 게시자가 밝힌 소속 연결 비율은 전체의 약 4분의 1~3분의 1로, 상당수 논문은 대학별 비교에서 빠져 있다.
- 점수 차이: 게시자는 연결된 표본의 평균이 2.19점, 전체 평균이 2.02점이라며 차이가 크지 않다고 설명했다.
- 실적 배분: 논문 한 편을 여러 대학에 각각 한 편씩 더하지 않고, 저자와 소속 수에 따라 나눠 합계가 1이 되도록 했다.
인사이트
공개 데이터로 만든 대학 순위에는 연구 역량과 데이터에 포착되기 쉬운 정도가 함께 반영될 수 있다. 기관별 누락 규모를 모르는 상태에서는 정교한 실적 배분도 대표성 문제를 해결하지 못한다.
자주 묻는 질문
- 이거 ICLR이 공식 발표한 대학 순위야?
- 아니다. 레딧 게시자가 OpenReview의 초기 심사 점수를 수집하고 arXiv와 OpenAlex를 연결해 만든 비공식 집계다. 최종 채택 실적이나 학회가 인증한 대학 평가와는 다르다.
- 논문 수가 왜 소수점으로 나와?
- 공동연구 논문 한 편의 실적을 저자와 소속 수에 따라 기관별로 나눴기 때문이다. 게시자의 예에서는 저자 3명 중 한 명이 MIT·칭화대 겸임이고 두 명이 MIT 소속일 때, MIT에 6분의 5편과 칭화대에 6분의 1편을 배정한다.
- 평균 점수가 비슷하면 순위도 믿어도 되는 거 아냐?
- 게시자가 밝힌 연결 표본의 평균은 2.19점, 전체 평균은 2.02점이지만 이 차이만으로 대학별 순위의 신뢰성을 판단할 수는 없다. 소속이 연결된 논문은 전체의 약 4분의 1~3분의 1이며, 대학별 누락 비율과 누락 논문의 점수 분포를 추가로 확인해야 한다.
이 기사 어땠어요?
피드백을 남겨주시면 더 나은 맞춤 추천을 만듭니다.