WITHDRAWN: Deviation Error: assessing machine learning predictions for replicate measurements in genomics and beyond

당신이 지문 대신 모든 살아있는 세포 안에 들어 있는 아주 작은 설명서의 패턴을 찾는 탐정이라고 상상해 보세요. 이 분야를 유전체학(genomics)이라고 부르며, 이는 생명이 어떻게 작동하는지 이해하기 위해 수십억 권의 책이 있는 도서관을 읽으려는 것과 같습니다. 하지만 여기에 까다로운 부분이 있습니다. 과학자들이 이 책들을 읽으려고 할 때, 제대로 읽었는지 확인하기 위해 종종 같은 페이지를 여러 번 복사하곤 합니다. 이 복사본들을 "반복 측정값(replicate measurements)"이라고 부릅니다. 여기서 큰 질문은, 그 책들에 무엇이 들어 있는지에 대한 우리의 추측이 실제로 얼마나 정확한지 어떻게 알 수 있느냐는 것입니다. 우리는 예측한 것과 실제로 본 것 사이의 "실수" 또는 "편차"를 측정할 방법이 필요합니다. 만약 우리의 줄자가 고장 났다면, 우리는 단지 도마뱀을 잘못 읽었을 뿐인데도 새로운 종의 용을 발견했다고 생각할 수도 있습니다. 그렇기 때문에 이러한 실수를 측정하기 위한 완벽한 자를 갖는 것은 과학자에게 가장 중요한 도구가 됩니다.

이제, 후삼(Husam)과 J. 티모시(J. Timothy)라는 과학자 팀이 이 작업을 위해 완전히 새롭고 초정밀한 자를 발명하기로 결심했다고 상상해 보세요. 그들은 자신들의 발명품을 "편차 오차(Deviation Error)"라고 불렀습니다. 그들은 이 새로운 자를 사용하여, 과학자들이 유전체학 및 기타 분야에서 반복 측정 결과를 얼마나 잘 예측할 수 있는지 확인하고 싶었습니다. 그것은 매우 멋진 아이디어처럼 들렸으며, 모두가 수학을 정확하게 할 수 있도록 도와줄 반짝이는 새로운 도구였습니다.

하지만 이야기는 갑작스러운 반전을 맞이합니다. 자신들의 발명품을 매우 면밀히 살펴본 후, 후삼과 J. 티모시는 그들의 새로운 자가 아직 공구 상자에 들어갈 준비가 되지 않았다는 것을 깨달았습니다. 그들은 "편차 오차" 뒤에 숨겨진 수학이 "적절한 점수 규칙(proper scoring rule)"—이는 단지 수학이 무언가 중요한 것을 측정하기 전에 신뢰할 수 있을 만큼 견고하고 깨지지 않아야 한다는 뜻의 화려한 표현입니다—으로 증명되기 위해 엄청난 양의 추가 작업이 필요하다는 것을 발견했습니다. 그들은 현재 버전이 마치 벽에 고정되지 않은 사다리처럼 약간 흔들린다는 것을 발견했습니다.

이 때문에 저자들은 매우 책임감 있는 결정을 내렸습니다. 그들은 이 논문을 공식적으로 철회했습니다. 그들은 본질적으로 이렇게 말하고 있는 것입니다. "우리는 이 멋진 아이디어를 만들었지만, 수학을 수정하고 테스트 케이스를 다시 구축하기 위해 작업실로 돌아가서 심각한 중노동을 해야 합니다." 그들은 편차 오차를 진정으로 신뢰할 수 있게 만들기 위해 필요한 연구를 마친 후에 미래에 이 프로젝트로 다시 돌아올 계획입니다. 현재로서는, 이 논문이 철회되었고 완성되지 않았기 때문에 그들은 명시적으로 모든 이들에게 이 연구를 참고 문헌으로 인용하지 말 것을 요청하고 있습니다. 따라서 더 나은 측정 도구에 대한 아이디어는 여전히 논의의 여지가 남아 있지만, 이 특정 시도는 수학이 스스로 설 수 있을 때까지 잠시 중단되었습니다.