Developing an indicator framework for monitoring and evaluating the institutionalization of evidence informed policymaking in health organizations

공중보건의 복잡한 세계에서 올바른 선택을 하는 것은 종종 적절한 정보를 갖추는 것에 달려 있습니다. 지도자들이 자원을 배분하거나 새로운 보건 프로그램을 설계할 때, 그들은 단순히 직관이나 전통에 의존하기보다 가용한 최선의 과학적 사실에 근거하여 결정하는 것이 이상적입니다. 이러한 관행을 증거 기반 정책 결정(evidence-informed policymaking)이라고 합니다. 그러나 단순히 좋은 데이터에 접근할 수 있는 것만으로는 충분하지 않습니다. 진짜 과제는 그 데이터의 사용을 조직이 작동하는 방식의 영구적이고 자동적인 일부로 만드는 것입니다. 이 과정을 제도화(institutionalization)라고 하며, 이는 특별하고 일시적인 이벤트를 일상적인 습관으로 바꾸는 것과 같습니다. 이를 위해서는 조직이 문화, 규칙, 그리고 일상을 변화시켜 증거를 찾는 것이 숨 쉬는 것만큼 자연스러워지도록 해야 합니다. 이러한 깊은 변화 없이는, 아무리 훌륭한 과학적 발견이라 할지라도 무시되거나 단 한 번만 사용되어 지속적인 보건 개선을 만들어내는 데 실패할 수 있습니다.

브라질의 시리오-리바네스 병원(Hospital Sírio-Libanês) 연구팀은 구체적인 문제를 해결하기 위해 착수했습니다: 조직이 이러한 변화를 성공적으로 완수했는지 어떻게 측정할 것인가? 많은 집단이 증거 기반 관행을 구현하려고 시도해 왔지만, 진전 상황을 추적하거나 성공을 평가할 수 있는 명확하고 통일된 방법은 없었습니다. 기존의 방법들은 흩어져 있었으며, 구체적인 척도보다는 모호한 설명에 의 Relying(의존)하는 경우가 많았습니다. 이 간극을 메우기 위해, 연구진은 조직이 증거 중심의 조직으로 나아가는 여정을 스스로 모니터링하고 평가할 수 있는 구조화된 도구와 질문 세트인 새로운 프레임워크를 구축하기 위한 방법론적 연구를 수행했습니다.

연구진은 기존의 과학 문헌, 특히 이와 같은 업무를 위한 지표를 식별하려고 시도했던 이전의 여섯 가지 연구를 검토하며 시작했습니다. 그들은 현재의 대부분의 접근 방식이 사람들이 더 자신감을 느낀다거나 프로세스가 더 나아졌다고 느끼는지 묻는 것과 같은 질적 기술에 크게 의존하고 있음을 발견했습니다. 이러한 감정은 중요하지만, 연구진은 표준이 충족되었는지 명확하게 보여줄 수 있는 구조화된 복합 척도가 부족하다는 점에 주목했습니다. 그들은 이 분야가 여전히 탐색 단계에 있으며, 추적하는 과정 자체를 평가하는 과정과 동일하게 취급하며, 진행 상황을 지켜보는 것과 최종 결과를 판단하는 것을 명확히 구분하지 못하고 있다고 관찰했습니다.

이러한 분석을 통해, 연구팀은 건강한 증거 기반 조직을 정의하는 여섯 가지 핵심 차원을 중심으로 구성된 새로운 프레임워크를 합성했습니다. 이 차원들에는 거버넌스(규칙과 권한 구조를 다룸), 표준화된 프로세스(증거 사용이 우연이 아닌 일상적으로 일어나도록 보장함), 리더십과 헌신(고위 관리직이 얼마나 지원을 제공하는지 살펴봄), 자원(가용 자금, 시간, 기술을 조사함), 파트너십(서로 다른 그룹이 어떻게 협력하는지에 집중함), 그리고 조직 문화(팀 내의 공유된 가치와 신념을 측정함)가 포함됩니다.

결과물인 제안서는 조직이 스스로의 건강 상태를 점검하는 데 사용할 수 있는 실질적인 기준, 매개변수 및 특정 지표 목록을 제공합니다. 예를 들어, "리더십과 책임"이라는 기준 아래, 프레임워크는 새로운 정책을 수립하거나 특정 자금을 할당하는 것과 같이 변화에 대한 지지를 반영하는 리더십의 행동 및 결정 횟수를 추적할 것을 제안합니다. "조직 문화"의 경우, 증거를 사용하고 혁신에 개방적이라고 보고하는 전문가의 비율을 측정할 것을 제안합니다. 또한 프레임워크에는 "교육 및 역량 개발"을 위한 지표가 포함되어 있어, 얼마나 많은 직원이 교육을 완료하고 증거 사용에 더 자신감을 느끼는지 묻습니다. 그리고 "조치의 공식화"는 새로운 공식 문서 중 증거 사용 계획을 포함하는 비율을 살펴봅니다.

결정적으로, 연구진은 이 프레임데임을 경직되기보다는 유연하게 설계했습니다. 그들은 모든 보건 조직이 서로 다른 맥ante(맥락)에서 운영된다는 점을 인정하며, 이 데이터를 수집하는 단일한 방법을 규정하지 않았습니다. 대도시의 병원은 농촌 클리닉과는 다르게 성공을 측정할 수 있습니다. 이 프레임워크는 관리자들이 자신의 필요에 맞게 조정하여 자신의 과정을 성찰하고 전략적 조정을 할 수 있도록 돕는 가이드 매트릭스로 기능하도록 의도되었습니다. 저자들은 이것이 최종적이고 완벽한 해결책이 아니라 시작점이라는 점을 강조합니다. 그들은 자신들의 작업이 기존 연구들을 분석한 것에 기초하고 있으며, 제안된 지표들이 아직 실제 현장에서 테스트되지 않았음을 명시적으로 밝히고 있습니다.

연구는 증거 기반 정책 결정을 제도화하는 것은 기술적 요인만큼이나 사회적, 문화적 요인에 달려 있는 느리고 복잡한 과정이라고 결론짓습니다. 단순히 연구 데이터베이스를 보유하는 것만으로는 부족합니다. 조직은 연구를 사용하는 것이 공유된 가치이자 표준적인 일상이 되는 문화를 구축해야 합니다. 구조적이면서도 적응 가능한 이 프레임워크를 제공함으로써, 연구진은 보건 조직들이 단순한 성과 점검을 넘어 진정한 조직 학습으로 나아가기를 희망합니다. 그들은 이러한 지표들이 실제 현장에서 얼마나 잘 작동하는지 확인하기 위해 다양한 환경에서 테스트하는 후속 연구가 필요하다고 제언하지만, 프레임워크 자체는 증거 기반 의사결정을 조직의 영구적인 정체성으로 만들고자 노력하는 조직들에게 꼭 필요한 지도를 제공합니다.