Video Observed Surgical Skills vs Directly Observed Surgical Skills Among Postgraduate Residents of Pediatric Surgery: A Comparative Study

소아를 대상으로 하는 섬세한 수술을 수행하는 법을 배우는 것은 숙련된 멘토의 세심한 관찰 아래 수년간의 훈련을 필요로 하는 고된 여정입니다. 이 전문 분야에서는 수련생의 기술을 판단하는 능력이 기술 그 자체만큼이나 중요합니다. 전통적으로 이러한 판단은 선임 외과의가 수술대 옆에 서서 모든 움직임을 지켜보고 즉각적인 피드백을 제공하는 실시간 방식으로 이루어집니다. 이러한 직접 관찰은 미래의 외과의들이 안전하게 수술할 준비가 되었는지 확인하기 위한 황금 표준으로 오랫동안 자리 잡아 왔습니다. 그러나 모든 수술 과정에 교사가 물리적으로 존재해야 한다는 점은 특히 바쁜 병원이나 전문 인력이 부족한 곳에서 상당한 물류적 과제를 야기합니다. 여기서 질문이 생깁니다. 수술 과정을 비디오로 녹화하여 전문가가 나중에 영상을 검토하는 것이 외과의의 능력을 똑같이 정확하게 보여줄 수 있는지, 아니면 실시간 경험이 카메라가 포착할 수 없는 무언가를 제공하는지에 대한 의문입니다.

킹 에드워드 의과대학교 소아외과부의 연구진은 두 가지 평가 방법을 나란히 놓고 비교함으로써 이 질문에 답하고자 했습니다. 연구진은 마지막 수련 과정을 밟고 있는 20명의 상급 레지던트를 모집하여 96건의 서로 다른 선택적 수술을 수행하는 모습을 관찰했습니다. 각 절차마다 연구팀은 이중적인 평가 방식을 채택했습니다. 먼저, 두 명의 교수진이 수술실에 서서 직접 수술을 관찰하며 레지던트의 수행 내용을 상세히 기록했습니다. 동시에, 전체 수술 과정은 비디오로 녹화되었습니다. 이후, 수술실에 있지 않았던 다른 두 명의 교수진이 이 녹화 영상을 시청하고 동일한 체크리스트를 사용하여 레지던트들을 채점했습니다. OSATS라고 알려진 이 체크리스트는 조직을 얼마나 잘 다루는지, 보조 인력을 어떻게 활용하는지, 그리고 전반적인 효율성은 어떠한지와 같은 7가지 구체적인 영역으로 수술 기술을 세분화합니다.

연구진이 점수를 비교했을 때, 외과의에 대한 전반적인 인상과 관련하여 명확한 패턴이 나타났습니다. 수술을 실시간으로 참관한 교수진은 영상을 나중에 시청한 이들보다 더 높은 평균 점수를 부여했습니다. 실시간 관찰자들은 평균 약 25점을 부여한 반면, 영상 검토자들은 평균 2점 미만인 21점을 부여했습니다. 약 4점 정도의 이러한 차이는 수술이 펼쳐지는 과정을 직접 보는 것이 더 긍정적으로 느껴지거나, 혹은 녹화본을 검토하는 것보다 더 관대한 평가를 허용할 수 있음을 시사합니다. 하지만 구체적인 기술 자체를 살펴볼 때는 이야기가 달라집니다. 연구진이 7가지 개별적인 수술 능력 범주를 조사했을 때, 영상 시청자들의 점수는 실시간 관찰자들의 점수와 놀라울 정도로 유사했습니다. 이러한 특정 영역에서의 차이는 0.1점 단위에서 0.3점 미만에 불과할 정도로 매우 작았으며, 이는 동등한 수준으로 간주되는 오차 범위 내에 있었습니다. 즉, 평가의 전반적인 분위기는 달랐을지라도, 기술에 대한 세부적인 분석은 두 방법 모두에서 일관성을 보였습니다.

본 연구는 비디오 녹화본을 검토하는 것이 소아외과의 구체적인 기술 영역을 평가하는 유효한 방법이며, 모든 사례에 대해 교사가 수술실에 물리적으로 존재해야 하는 번거로움을 덜어주는 실용적인 대안을 제공한다고 결론짓습니다. 이러한 결과는 자원이 한정된 훈련 프로그램에 특히 가치가 있는데, 이는 모든 평가마다 교수진이 물리적으로 참석해야 할 필요성을 제거하여 잠재적으로 더 많은 외과의를 양성하는 것을 용이하게 만들기 때문입니다. 그럼에도 불구하고 연구진은 필요한 주의 사항을 덧붙였습니다. 영상 검토자들이 일관되게 더 낮은 전반적 점수를 부여했기 때문에, 레지던트가 독립적으로 진료할 준비가 되었는지 결정하는 것과 같은 고위험 결정에 이 방법을 사용하는 것은 신중하게 이루어져야 합니다. 영상 방식은 레지던트들이 자신의 구체적인 기술을 향상시키는 데는 효과적이지만, 이 방법이 최종적인 합격/불합격 판정을 위한 신뢰성을 확립할 수 있는 추가 테스트를 거치기 전까지는, 그러한 결정적인 순간들에 전통적인 실시간 평가를 대체해서는 안 됩니다.