Multi-Lab Testing of Early Preclinical Discoveries Identifies Promising Treatments
이 논문은 다기관 전임상 연구를 수행하여 엄격성을 높이는 것이 실험적 차이로 인해 초기 단일 실험실의 결과 중 극히 일부만이 재현된다는 점을 밝힘으로써 검증되지 않은 치료법을 효과적으로 걸러내고, 이를 통해 임상 시험을 위한 진정으로 유망한 후보 물질을 식별해 낸다는 것을 입증한다.
원본 논문은 CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) 라이선스로 제공됩니다. 이것은 동료 심사를 거치지 않은 프리프린트의 AI 생성 설명입니다. 의학적 조언이 아닙니다. 이 내용을 바탕으로 건강 관련 결정을 내리지 마세요. 전체 면책 조항 읽기
과학적 아이디어를 사람을 돕는 의약품으로 바꾸는 긴 여정에는 악명 높은 병목 현상이 존재합니다. 과학자들은 종-종 동물이나 세포를 이용한 단일 실험실 내에서 매우 유망해 보이는 치료법을 발견하곤 합니다. 결과는 흥미롭고, 수치는 강력해 보이며, 희망은 높습니다. 하지만 이와 동일한 치료법들이 인간 대상 임상 시험으로 넘어가면, 90% 이상의 확률로 실패합니다. 초기 실험실의 성공과 실제 세계에서의 실패 사이의 이러한 간극은 시간, 돈, 그리고 희망의 엄청난 낭비입니다. 문제는 대개 초기 연구 자체에 있습니다. 이 연구들은 대개 규모가 작고, 단 한 곳에서만 수행되며, 결과가 실제인지 아니면 그저 운 좋은 우연인지를 확인하기 위해 필요한 엄격한 안전장치가 부족합니다. 이를 해결하기 위해, 연구자들은 새로운 접근 방식을 테스트하기 시작했습니다. 약물이 인간에게 도달하기 전에, 여러 실험실이 협력하여 더 엄격한 규칙과 더 큰 피험자 집단을 사용하여 해당 치료법을 다시 테스트해야 한다는 것입니다. 이 방법은 진정으로 효과적인 치료법과, 단지 한 실험실의 특정 조건이나 우연 덕분에 효과가 있었던 것을 구분하는 것을 목표로 합니다.
독일 전역과 그 너머의 대규모 과학자 팀은 최근 이 아이디어를 광범-적으로 테스트했습니다. 그들은 두 가지 서로 다른 연구 그룹에서 데이터를 수집했습니다. 첫 번째 그룹은 유망한 초기 발견들을 재검증하기 위해 정부가 특별히 자금을 지원한 12개의 프로젝트로 구성되었습니다. 두 두 번째 그룹은 이미 과학 저널에 발표된 유사한 다중 실험실 연구들의 모음이었습니다. 총 19개의 서로 다른 연구 프로젝트가 최종 분석에 성공적으로 포함되었습니다. 각 프로젝트는 단일 실험실에서 이루어진 초기 발견으로 시작되었고, 이어서 여러 독립적인 실험실이 그 결과를 재현하려고 시도하는 엄격한 재검증 과정을 거쳤습니다. 목표는 이러한 초기 '승리'들이 테스트가 더 까다로워지고 조건이 더 다양해졌을 때 얼마나 유지되는지 확인하는 것이었습니다.
결과는 극명했습니다. 연구자들이 초기 단일 실험실 결과와 새로운 다중 실험실 결과를 비교했을 때, 치료 효과의 강도는 현저히 감소했습니다. 정부 지원 프로젝트의 경우, 10개 중 3개의 연구만이 원래의 긍정적인 결과를 확인했습니다. 발표된 연구들의 경우 그 비율이 9개 중 6개로 더 높았지만, 전반적인 추세는 명확했습니다. 즉, 초기의 흥분은 종종 과대평가였다는 것입니다. 연구자들은 이것이 정확히 왜 일어났는지 분석했습니다. 그들은 효과의 감소가 세 가지 주요 요인에 의해 발생했다는 것을 발견했습니다. 첫째, 새로운 연구의 대조군이 기존 연구보다 더 건강했기 때문에 상대적으로 치료법이 덜 인상적으로 보였습니다. 둘째, 서로 다른 환경에서 테스트했을 때 실제 치료에 대한 반응이 때때로 약해졌습니다. 셋째, 결과가 더 가변적이 되었습니다. 즉, 다양한 실험실에서 다양한 동물과 조건을 사용하여 약물을 테스트하면 데이터에 '노이즈'가 생겨 명확한 효과를 관찰하기가 더 어려워집니다.
낮은 성공률에도 불구하고, 연구자들은 이러한 결과가 방법론의 실패가 아니라 필터로서의 성공이라고 주장합니다. 다중 실험실 연구는 초기 실험보다 훨씬 더 엄격하게 설계되었습니다. 그들은 더 많은 수의 동물을 사용했고, 암수 피험자를 모두 포함했으며, 무작위 배정과 눈가림(과학자들이 실험 끝에 도달할 때까지 어떤 동물이 치료를 받는지 알지 못하게 하는 것)과 같은 엄격한 규칙을 철저히 준-수했습니다. 이러한 안전장치들은 편향을 방지하고 결과의 신뢰성을 확보하기 위한 것입니다. 연구들은 이러한 엄격한 규칙이 적용될 때 효과 크기는 줄어들지만, 남은 결과에 대한 확신은 높아진다는 것을 보여주었습니다. 원래의 발견을 확인한 연구들은 견고했던 반면, 실패한 연구들은 해당 치료법이 더 넓은 맥락에서는 작동하지 않을 수 있다는 명확한 신호를 제공했습니다.
연구팀은 또한 연구의 '성공'을 어떻게 판단할 것인가에 대해서도 탐구했습니다. 그들은 매우 엄격한 규칙부터 완화된 규칙에 이르기까지 다양한 성공 정의를 테스트했습니다. 가장 완화된 기준을 적용했을 때조차, 대다수의 연구가 원래의 발견을 확인하지 못했습니다. 이는 단일 실험실 연구에서 보이는 초기 높은 성공률이 종종 오해의 소지가 있음을 시사합니다. 연구자들은 이러한 다중 실험실 연구가 필수적인 스크리닝 도구 역할을 한다고 결론지었습니다. 이들은 효과가 없는 치료법이 비용이 많이 들고 위험한 인간 대상 임상 시험으로 넘어가는 것을 막아줍니다. 어떤 치료법이 초기에 실패하는지를 식별함으로써, 과학은 자원을 절약하고 진정으로 엄격하고 현실적인 조건 하에서 스스로를 증명한 후보들에게만 집중할 수 있습니다. 이 연구는 약물 개발 문제를 해결했다고 주장하는 것이 아니라, 명확한 근거에 기반한 경로를 제시합니다. 즉, 만약 어떤 치료법이 여러 독립적인 실험실의 테스트를 견뎌내지 못한다면, 그것은 다음 단계로 나아갈 준비가 되지 않았을 가능성이 높다는 것입니다.
연구 분야의 논문에 파묻히고 계신가요?
연구 키워드에 맞는 최신 논문의 일일 다이제스트를 받아보세요 — 기술 요약 포함, 당신의 언어로.