The Relatives Experience Questionnaire for Acute Inpatient Child and Adolescence Mental Health Services (REQ-AICAMHS): reliability and validity following a Norwegian survey

본 연구는 노르웨이 급성 입원 정신건강 시설에 입원한 청소년의 보호자 경험을 측정하고 개선하기 위해 최초의 도구인 '청소년 급성 입원 정신건강 서비스 보호자 경험 설문지(REQ-AICAMHS)'를 개발하고 심리측정적으로 평가하는 것을 목표로 한다.

핵심

청소년 정신건강 문제를 겪는 청소년들을 위한 병원 병동을 바쁘고 고위험의 공항으로 상상해 보세요. 청소년들은 어려운 여정을 겪는 여행객이고, 그들의 부모나 가족 구성원 (상대방) 은 터미널에서 기다리며 혼란을 헤쳐 나가도록 돕는 사람들입니다.

이 논문은 본질적으로 터미널에서 기다리는 가족들을 위해 특별히 설계된 새로운 피드백 설문의 청사진입니다.

간단한 비유를 사용하여 이 프로젝트의 개요를 살펴보면 다음과 같습니다:

1. 문제: 맹비행

현재 공항 관리자 (정신건강 서비스 기관) 는 가족들이 여정을 어떻게 느꼈는지 물어볼 좋은 방법이 없습니다. 성인 여행객과 청소년 자신을 위한 설문조사는 있지만, 가족에게 "자녀가 병원에 입원해 있는 동안 당신에게 경험은 어땠나요?"라고 구체적으로 묻는 것은 없습니다.

이런 피드백이 없으면 공항은 맹비행을 하고 있는 것입니다. 대기 공간이 너무 시끄러운지, 직원이 너무 혼란스럽게 대했는지, 혹은 가족들이 지원을 받았는지 알 수 없습니다. 저자들은 공항을 고치려면 밖에서 기다리는 사람들의 목소리에 귀 기울여야 한다고 말합니다.

2. 해결책: "REQ-AICAMHS"

연구자들은 가족 경험 설문지 (REQ-AICAMHS) 라는 새로운 도구를 개발하고 있습니다. 이는 가족들을 위한 맞춤형 "고객 만족도 보고서"라고 생각하시면 됩니다.

• 누구를 위한 것인가요? 노르웨이의 급성 정신건강 병동에 입원한 청소년들의 부모, 보호자 및 가족 구성원.
• 무엇을 묻나요? "구조" (건물이 깨끗하고 안전한가?), "과정" (직원이 명확하고 친절하게 말했는가?), 그리고 "결과" (가족들이 치료가 도움이 되었다고 느꼈는가?) 에 대해 묻습니다.

3. 개발 방법: "레시피"

연구자들은 무엇을 물어볼지 단순히 추측하지 않았습니다. 노르웨이 공중보건연구소에서 개발한 엄격한 레시피를 따랐습니다:

• 요리책 읽기: 기존 설문지와 연구를 살펴 어떤 질문들이 일반적으로 효과적인지 확인했습니다.
• 셰프와 상담: 전문가들 (의사, 연구자, 가족 옹호자) 과 대화하여 질문에 대한 의견을 구했습니다.
• 요리 맛보기: 실제 가족 구성원들을 인터뷰하여 질문들이 이해하기 쉽고 혼란스럽지 않은지 확인했습니다.
• 맛보기 (인지 테스트): 전체에 배포하기 전에 소수의 가족들이 초안 설문을 시도해 보게 하여 "버그"나 혼란스러운 문구를 찾아냈습니다.

4. 대대적인 테스트: 전국 규모의 "맛보기"

설문이 준비되면, 노르웨이 전역의 17 개 전문 정신건강 병동 전체로 발송할 계획입니다.

• 샘플: 이들 병동에 입원한 거의 모든 청소년의 가족들로부터 의견을 듣고자 합니다.
• 방법: 가족들에게 디지털 초대장 (문자 메시지나 이메일 링크와 같은) 을 보낼 것입니다.
• 목표: 새로운 아이스크림 맛이 실제로 좋은지 알기 위해 많은 수의 맛보기 테스트가 필요하듯, 결과가 정확하도록 하기 위해 많은 응답이 필요합니다.

5. 품질 점검: "실험실 테스트"

결과를 신뢰하기 전에 설문지 자체가 좋은 도구임을 입증해야 합니다. 그들은 고급 수학 (통계) 을 사용하여 다음을 점검할 것입니다:

• 신뢰도: 같은 질문을 두 번 물었을 때 같은 답변이 나오나요? (자자가 곧은가요?)
• 타당도: 설문이 측정해야 할 것을 실제로 측정하고 있나요? (온도계가 실제로 온도를 측정하는지, 아니면 습도만 측정하는지?)
• 불필요한 부분 제거: 데이터를 분석하여 어떤 질문이 가장 유용한지 확인할 계획입니다. 질문이 혼란스럽거나 가치를 더하지 않는다면 제거할 것입니다. 목표는 향후 사용이 더 쉬운 간결하고 강렬한 버전의 설문지를 만드는 것입니다.

6. "비밀 소스": 서술형 질문

표준적인 1 점부터 5 점까지의 평점 외에도, 설문지에는 가족들이 자신의 이야기를 쓸 수 있는 공간이 포함되어 있습니다. 연구자들은 이러한 이야기들을 스캔하기 위해 인간의 읽기와 컴퓨터 프로그램 (머신러닝) 을 모두 사용할 계획입니다. 이를 통해 "모두가 대기실에 대해 불평했다"거나 "모두가 음식을 좋아했다"와 같은 숨겨진 주제를 찾아냅니다.

요약

간단히 말해, 이 논문은 새로운 도구의 구축 및 테스트 단계를 설명합니다. 연구자들은 입원한 청소년들의 가족들을 위한 전문적인 "보고서"를 만들고, 그것이 작동하는지 엄격하게 테스트하며, 결과를 활용하여 노르웨이 병원이 치료를 개선하도록 계획하고 있습니다.

중요한 참고 사항: 이 논문은 명시적으로 프리프린트 (초안) 이며, 다른 과학자들에 의해 동료 검토를 아직 받지 않았음을 밝히고 있습니다. 이는 최종적이고 입증된 임상 결과에 대한 보고서가 아니라, 그들이 데이터를 어떻게 분석할 것인지에 대한 제안과 계획입니다. 현재의 목표는 의료 치료를 변경하는 것이 아니라 설문 도구가 작동하는지 증명하는 것입니다.

기술 요약

기술 요약: 급성 입원 아동 및 청소년 정신건강 서비스를 위한 가족 경험 설문지 (REQ-AICAMHS)

문제 제기
정신건강 장애를 가진 청소년은 복잡한 돌봄이 필요한 취약 집단이지만, 급성 입원 정신건강 환경에서 그들 자신과 가족의 경험은 여전히 잘 이해되지 않고 있습니다. 환자 보고 경험 측정도구 (PREMs) 는 의료 서비스 질 향상에 필수적인 것으로 인정받고 있지만, 아동 및 청소년 정신건강 입원 (CAMHS) 환경을 위해 특별히 설계된 검증된 측정 도구는 크게 부족합니다. 경험 설문지 (ESQ) 와 같은 기존 도구들은 주로 외래 진료를 위해 설계되었으며, 입원 기간과 관련된 특정 경험 영역 (예: 사생활 보호, 활동, 가족 참여 등) 보다 만족도에 초점을 맞추고 있습니다. 또한, 노르웨이의 급성 입원 단위에서 개별 사용자 경험을 체계적으로 수집하는 작업은 현재 조정되지 않았으며 검증된 측정 도구가 없어, 사용자 관점에서 서비스 성과를 평가하는 능력을 저해하고 준수율 및 결과 개선의 잠재력을 제한하고 있습니다.

연구 방법
본 연구는 급성 입원 아동 및 청소년 정신건강 서비스를 위한 가족 경험 설문지 (REQ-AICAMHS) 의 개발과 심리측정적 평가를 개요로 합니다. 연구는 노르웨이 공중보건연구소 (NIPH) 가 확립한 표준 방법론을 따릅니다.

• 도구 개발: 설문지는 포괄적인 문헌 검토, 전문가 상담 (임상가, 연구자, 환자 조직 대표), 가족 대상 질적 인터뷰, 그리고 인지적 테스트를 포함한 다단계 과정을 통해 구성됩니다. 최종 도구는 표준화된 5 점 리커트 척도 (1=전혀 아니다 ~ 5=매우 큰 정도) 를 사용하는 폐쇄형 문항과 질적 피드백을 위한 개방형 질문을 포함합니다.
• 데이터 수집: 연구는 노르웨이 전역 17 개 급성 입원 CAMHS 단원에 입원한 모든 청소년의 가족을 대상으로 합니다. 데이터 수집은 디지털 방식으로 이루어지며, 노르웨이 환자 등록부 (NPR) 와 Helsenorge.no 를 통해 초대장을 발송합니다. 프로토콜에는 질적 인터뷰와 인지적 테스트를 위한 12~15 명의 가족을 대상으로 한 파일럿 단계를 거친 후 대규모 조사가 이어집니다. 데이터 수집은 입원 중 (우선) 또는 퇴원 직후에 이루어지도록 계획되었습니다.
• 심리측정 분석: 본 연구는 데이터 품질, 요인 구조, 구성 타당도, 그리고 내적 일관성을 평가하기 위해 엄격한 통계적 프레임워크를 적용합니다.
  • 기술 통계: 결측 데이터, 천장 효과, 그리고 문항별 평균을 분석합니다. 결측 데이터가 20% 를 초과하는 문항은 제외됩니다.
  • 요인 분석: 도나비디언 (Donabedian) 의 구조, 과정, 결과 모델을 지침으로 하여 잠재적 구조를 식별하기 위해 주성분 요인 분석 (principal-axis factoring) 과 promax 회전법을 사용한 탐색적 요인 분석 (EFA) 을 수행합니다.
  • 신뢰도: 크론바흐 알파 (목표 ≥0.7) 와 문항 - 전체 상관관계를 사용하여 내적 일관성을 평가합니다.
  • 타당도: 구성 타당도는 내부 상관관계와 집단 간 차이를 통해 검증합니다. 변별 타당도는 가설적 척도와의 문항 상관관계와 다른 척도와의 상관관계를 분석하여 평가합니다.
  • 문항 반응 이론 (IRT): 간소화된 설문지 버전 개발을 지원하기 위해 일반화 부분 크레딧 모델 (GPCM) 을 적용하여 문항 변별력 ('a'), 난이도 임계값 ('b'), 그리고 모델 적합도 (S–χ²) 를 추정합니다.
  • 질적 분석: 개방형 응답은 확립된 질적 방법과 머신러닝 기법을 모두 사용하여 주요 주제와 하위 영역을 식별하기 위해 분석됩니다.

주요 기여

• 최초의 전문 도구: REQ-AICAMHS 는 노르웨이 급성 입원 아동 및 청소년 정신건강 단위에서 가족의 경험을 포착하기 위해 특별히 설계된 최초의 도구입니다.
• 방법론적 엄격성: 본 연구는 고전적 검사 이론 (EFA, 크론바흐 알파) 과 현대적 심리측정 접근법 (IRT/GPCM) 및 질적 데이터를 위한 머신러닝을 결합한 포괄적인 검증 프레임워크를 적용합니다.
• 품질 개선의 기반: 검증된 도구를 확립함으로써, 본 연구는 해당 특정 환경에서의 일상적 PREMs 공백을 메우고 17 개 단위로 구성된 전국 네트워크 전반의 체계적인 품질 모니터링 및 개선 이니셔티브를 가능하게 하는 것을 목표로 합니다.
• 이중 관점 접근: 본 논문은 가족에 초점을 맞추고 있지만, 이는 환자와 그들의 지원 네트워크를 모두 포함하는 환자 중심 접근을 촉진하는 청소년용 대응 설문지도 포함하는 더 넓은 프로젝트의 일부입니다.

결과
참고: 본 논문은 연구 설계와 계획된 분석을 기술하는 프로토콜 논문이므로, 구체적인 실증 결과 (예: 특정 요인 부하량, 정확한 크론바흐 알파 값, 또는 특정 IRT 매개변수 등) 는 아직 제시되지 않았습니다. 논문의 '결과' 섹션은 예상되는 산출물을 개요로 합니다:

• 응답자 인구 (성별, 연령, 배경) 의 기술 통계.
• 결측 데이터 비율, 평균 값, 천장 효과를 포함한 문항별 분석.
• EFA 에서 도출된 요인 구조, 요인 부하량, 그리고 신뢰도 계수.
• 문항과 척도 간의 상관 행렬.
• 척도, 배경 변수, 그리고 응답 간의 연관성에 관한 구성 타당도 검증 결과.
• 변별력 값, 난이도 임계값, 그리고 문항 적합도 통계를 포함한 IRT 매개변수.
• 가장 정보량이 풍부한 문항을 기반으로 한 설문지 간소화 버전의 식별.

의의 및 주장
본 논문은 급성 입원 CAMHS 에서 검증된 PREMs 의 현재 부재를 해결하기 위해 REQ-AICAMHS 개발이 필수적이라고 주장합니다. 종종 돌봄 과정에 깊이 관여하는 가족의 관점을 포착함으로써, 본 연구는 현재 측정되지 않고 있는 접근성, 의사소통, 조정, 그리고 치료 경험에 대한 통찰력을 제공하고자 합니다. 저자들은 이 도구가 증거 기반 품질 개선을 촉진하고, 광범위한 구현을 위한 간소화된 버전 개발을 지원하며, 궁극적으로 노르웨이의 정신건강 장애를 가진 청소년을 위한 더 환자 중심적인 의료 시스템에 기여할 것이라고 봅니다. 본 연구는 이러한 검증된 도구 없이는 사용자 관점에서 서비스 성과를 평가하는 것이 불가능하며, 이로 인해 임상 결과 개선의 잠재력이 감소한다고 강조합니다.