Quantifying User Engagement with the Helpilepsy Seizure Diary

기술 요약: Helpilepsy 전자 발작 일기를 통한 사용자 참여도 정량화

문제 제기
발작 일지는 뇌전증의 장기적인 관리에 있어 매우 중요하지만, 이러한 도구에 대한 환자의 참여는 종종 간헐적으로 나타납니다. 기존 연구들은 전자 발작 일기의 타당성을 입증하고 일반적인 순응도(유지율)를 측정해 왔으나, 사용자 참여의 다차원적 성격을 이해하는 데에는 상당한 공백이 존재합니다. 기존 연구들은 사용자가 애플리케이션의 다양한 기능을 시간이 지남에 따라 어떻게 사용하는지보다는, 사용자가 애플리케이션을 계속 사용하는지 여부에 주로 초점을 맞춥니다. 이러한 세밀한 이해의 부족은 발작 빈도, 유병 기간, 치료 복잡성 측면에서 뇌전증 환자의 이질성을 고려할 때, 지속적인 자기 관리를 효과적으로 지원할 수 있는 도구를 설계하는 데 한계를 줍니다.

방법론
저자들은 2017년부터 2026년 사이에 수집된 Helpilepsy® 모바일 애플리케이션(Neuroventis BV)의 고유 사용자 25,782명으로부터 얻은 익명화된 종단적 데이터를 사용하여 이차 분석을 수행했습니다. 데이터 세트에는 인구통계학적 정보, 발작 보고, 수면 점수, 기분 점수, 약물 상세 정보 및 프로필 완성도 데이터가 포함되었습니다.

참여도를 정량화하기 위해 저자들은 다섯 가지 구성 요소의 가중 합으로 정의된 복합 **참여 지표(Engagement Metric)**를 개발했습니다:

1. 프로필 완성도 비율 (PCR): 사용자가 작성한 가용 프로필 기능(예: 성별, 출생 연도)의 백분율.
2. 발작 업로드 규칙성 ($R_{seiz}$): 발작 보고의 일관성을 측정하는 척도로서, 업로드 간격의 평균 대비 표준편차를 이용한 정규화된 "버스트성(burstiness)" 점수와 저빈도 사용자를 고려한 포화 함수를 결합하여 계산되었습니다.
3. 수면 업로드 규칙성 ($R_{sleep}$): 발작 규칙성과 유사하게 계산되었으나 수면 점수 업로드에 적용되었습니다.
4. 보유 기간 사용 비율 (TUR): 사용자가 수면 점수를 업로드한 고유 일수를 애플리케이션이 설치되어 있던 총 일수로 나눈 비율입니다. 이는 생물학적으로 트리거되지 않는 선택적 기능에 대한 지속적인 참여의 대리 지표 역할을 합니다.
5. 복약 알림 (MR): 복약 알림 설정 여부를 나타내는 이진 지표 (0 또는 1).

지표는 다음과 같이 정의됩니다:
$$Engagement = w_{PCR} \cdot PCR + w_{Rseiz} \cdot R_{seiz} + w_{Rsleep} \cdot R_{sleep} + w_{TUR} \cdot TUR + w_{MR} \cdot MR$$
가중치는 $w_{PCR}=0.20$, $w_{Rseiz}=0.25$, $w_{Rsleep}=0.25$, $w_{TUR}=0.20$, $w_{MR}=0.10$로 할당되었습니다.

이상치 제거 후 17,151명의 사용자에 대해 지표를 계산한 후, 저자들은 서로 다른 사용자 그룹을 식별하기 위해 **K-평균 군집화(K-Means clustering)**를 적용했습니다. 최적의 클러스터 수는 엘보우 플롯(elbow plot)과 실루엣 점수(silhouette scores)를 통해 결정되었으며, 두 방법 모두 3개 클러스터 솔루션을 지지했습니다.

주요 결과
군집 분석 결과 세 가지 뚜렷한 참여 그룹이 식별되었습니다: 낮음(Low) (9,807명), 중간(Medium) (6,338명), 높음(High) (1,006명).

• 행동적 차이:

  • 낮은 참여 그룹: 이들은 주로 앱을 단순한 발작 일기로 사용했습니다. 상대적으로 높은 발작 업로드 규칙성을 보였으나, 프로필 완성도, 수면 업로드 규칙성 및 보유 기간 사용 비율은 거의 0에 가까웠습니다.
  • 중간 참여 그룹: 이들은 높은 프로필 완성도와 복약 알림 사용률을 보였으나, 수면 점수 및 발작 업로드의 규칙성은 낮았습니다. 이들은 발작 추적 및 약물 관리를 위해 앱을 사용하는 것으로 보이지만, 수면이나 기분 추적과 같은 선택적 기능에는 일관되게 참여하지 않았습니다.
  • 높은 참여 그룹: 이들은 거의 모든 지표에서 높은 점수를 보였으며, 특히 수면 점수 업로드 규칙성과 보유 기간 사용 비율이 높았습니다. 이들은 기분 및 수면 점수를 보고할 가능성이 가장 높았습니다.

• 임상 및 인구통계학적 상관관계:

  • 연령 및 진단: 고참여 그룹은 중위안(median) 기준으로 진단 당시 연령이 중간(14세) 및 낮은(11세) 그룹에 비해 유의미하게 높았습니다(18세). 또한 진단 후 경과 시간도 더 길었습니다(중위안 기준 33년 vs 27년 및 24년).
  • 약물 부담: 고참여 그룹은 중간(2종) 및 낮은(1종) 그룹에 비해 더 많은 항경련제(ASM)를 복용하는 것으로 보고되었습니다(중위안 4종). 이들은 2차 약제 및 난치성 뇌전증 약물(예: brivaracetam)을 처방받을 가능성이 더 높았으며, 흔히 쓰이는 1차 약제(예: levetiracetam, lamotrigine)의 고용량을 투여받았습니다.
  • 시간적 안정성: 참여 수준은 시간이 지나도 그룹 내에서 비교적 안정적으로 유지되었으나, 고참여 그룹은 다른 그룹에 비해 평균 앱 사용 기간(3개월 단위 구간 수)이 짧았습니다. 이는 이들이 임상적 목표를 달ดี하고 더 빨리 사용을 중단할 수 있음을 시사합니다.

주요 기여

1. 다차원적 참여 지표: 본 논문은 단순한 유지율을 넘어 특정 앱 기능(발작, 수면, 프로필, 알림)에 대한 사용자의 상호작용 범위와 일관성을 포착하는 새로운 복합 지표를 도입했습니다.
2. 사용자 세분화: 비지도 학습 기반의 군집화를 적용함으로써, 뇌전증 일기 사용자가 행동 패턴이 서로 다른 저참여, 중참여, 고참여 그룹으로 자연스럽게 구분됨을 실증적으로 보여주었습니다.
3. 임상적 프로파일링: 본 연구는 참여 수준을 특정 임상 특성과 연결하여, 고참여 사용자가 일반적으로 더 고령이며, 진단 후 경과 시간이 길고, 치료 복잡성(난치성 뇌전증)이 높다는 점을 식별했습니다.

의의 및 주장
저자들은 참여 프로필을 이해하는 것이 디지털 헬스 도구의 설계를 개선하는 데 필수적이라고 주장합니다. 연구 결과는 다음을 시사합니다:

• 온보딩 전략: (진단 시 연령이 낮고 진단 후 경과 시간이 짧은) 신규 환자들은 수면이나 기분과 같은 비발작 변수를 추적하는 것의 가치를 이해할 수 있도록 보다 표적화된 온보딩과 교육이 필요할 수 있습니다.
• 기능의 중요성: 참여는 단순히 발작 보고에 의해서만 결정되는 것이 아닙니다. 수면 추적과 같은 선택적 기능은 고참여 사용자를 구분 짓는 중요한 요소입니다.
• 임상적 통합: (고령, 난치성, 높은 약물 부담을 가진) 고참여 사용자의 프로필은 참여가 질병에 대한 성숙한 이해와 능동적인 자기 관리의 필요성에 의해 유도됨을 시사합니다. 이는 디지털 도구가 이러한 특정 요구를 지원하도록 설계되어야 하며, 잠재적으로 임상 케어와의 긴밀한 통합을 통해 이루어져야 함을 의미합니다.

본 논문은 데이터 희소성이 한계로 남아 있으나, 제안된 프레임워크가 사용자 참여를 특징짓는 강력한 방법을 제공하며, 이는 더욱 효과적이고 개인화된 뇌전증 모니터링 도구 개발에 정보를 제공할 수 있다고 결론짓습니다.