ICML 2026 Policy A 위반 제재를 둘러싼 Reddit 논쟁

2026년 3월 18일 r/MachineLearning의 Reddit post는 ICML이 LLM 사용 금지 조건에 동의한 reviewer들의 위반을 이유로 papers를 reject한 것이 과도한지 질문했다. 토론은 빠르게 두 갈래로 나뉘었다. 한쪽은 약속한 rule을 어겼다면 강한 enforcement가 필요하다고 봤고, 다른 쪽은 false positive 가능성이 조금이라도 있다면 desk rejection은 지나치게 무거운 penalty라고 우려했다.

공식 확인은 ICML의 2026년 3월 18일 blog post On Violations of LLM Review Policies에서 나왔다. 이 글에 따르면 ICML은 Policy A를 따르기로 명시적으로 동의한 reciprocal reviewer 506명과 연결된 submissions 497건을 desk reject했고, LLM 사용이 감지된 reviews는 795건이었다. 같은 글은 ICML 2026이 두 개의 review policy를 운영했다고 설명한다.

• Policy A: reviewing 과정에서 LLM 사용을 금지.
• Policy B: privacy-compliant LLMs를 paper 이해, related works 확인, reviewer가 직접 쓴 문장의 polish에 한해 제한적으로 허용. 다만 strengths와 weaknesses 판단, review outline 제안, full review 작성은 허용되지 않음.

ICML reviewer instructions는 sanction 근거를 더 직접적으로 적고 있다. reviewer는 자신에게 assigned된 policy에서 벗어나면 academic integrity guideline 위반이 되며 자신의 submissions가 desk rejection될 수 있다는 문구에 동의해야 한다. 일정도 중요하다. 공식 instructions에 따르면 reviewing period는 2026년 2월 12일부터 3월 12일까지였고, reviewer-author discussion period는 2026년 3월 24일 시작이다. 즉 이번 조치는 initial review가 끝난 뒤, author interaction이 본격화되기 직전에 공개된 셈이다.

ICML의 설명은 generic AI-text detector에 의존했다는 해석도 부정한다. blog post는 submission PDF 안에 hidden instruction을 넣는 watermarking 방식이 사용됐고, flag된 case는 모두 사람이 다시 확인했다고 밝혔다. 또한 ICML은 earlier 2026 policy materials인 Introducing ICML 2026 policy for LLMs in reviews에서 이미 reported violations는 penalize하겠고, peer-review confidentiality를 해치지 않는 범위에서 automated tools로 violations를 탐지할 계획이라고 예고한 바 있다.

Reddit comments는 바로 그 detection method를 둘러싸고 이어졌다. 여러 commenter는 이것이 사실상 prompt injection 또는 watermarking이며, paper PDF 전체를 LLM에 넣고 결과를 거의 그대로 가져오는 가장 조심성 없는 위반만 잡아낼 가능성이 높다고 봤다. 지지하는 쪽은 그래서 오히려 일반적인 AI writing detector보다 false positive 위험이 낮다고 주장했다. 반대로 비판하는 쪽은 오탐이 극히 드물더라도 coauthor 전체가 피해를 볼 수 있고, collaboration과 reputation에 미치는 손상이 커서 threshold가 매우 엄격해야 한다고 말했다.

종합하면 이번 이슈의 핵심은 Reddit headline처럼 모든 LLM 사용 reviewer를 일괄 처벌했다는 데 있지 않다. 공식 ICML 자료가 보여주는 더 정확한 사실은, no-LLM track인 Policy A를 실제로 assigned받았고 그 policy 위반 시 자신의 submission에도 불이익이 갈 수 있다는 점을 사전에 안내받은 reviewer들에게 제재가 적용됐다는 점이다. Reddit discussion은 그 enforcement가 필요한가보다, 그 enforcement를 뒷받침한 evidence와 penalty의 비례성이 충분한가에 더 집중하고 있다.