Interaction Techniques that Encourage Longer Prompts Can Improve Psychological Ownership when Writing with AI

기술 요약: 더 긴 프롬프트를 유도하는 상호작용 기법이 AI와 함께 글을 쓸 때 심리적 소유감을 향상시킬 수 있음

문제 정의
심리적 소유감(자신의 창작물이 자신에게 속해 있다는 느낌)은 인간-AI 협업 글쓰기에서 중요한 요소이다. 연구에 따르면 사용자가 AI 도구가 텍스트의 상당 부분을 생성하거나 사용자의 입력이 최소화될 때 소유감이 감소하는 경험을 하는 경우가 많다. 이전 연구(Joshi와 Vogel [19])는 더 긴 프롬프트를 작성하는 것이 심리적 소유감을 높인다는 점을 입증했지만, 엄격한 제약(예: 엄격한 단어 최소 수치) 없이 이러한 행동을 장려하기 위한 메커니즘은 아직 충분히 탐구되지 않았다. 본 연구가 다루는 핵심 문제는, 짧은 프롬프트에 "마찰(friction)"을 도입하여 사용자가 더 많은 시간과 노력을 투자하도록 동기를 부여함으로써, 결과물에 대한 더 강한 소유감을 형성하게 만드는 상호작용 기법을 어떻게 설계할 것인가이다.

연구 방법론
저자들은 프롬프트 길이와 심리적 소소를 높이기 위해 설계된 상호작용 기법을 평가하기 위해 두 가지 피험자 내(within-subjects) 실험을 수행하였다.

• 실험 1: 비용을 통한 마찰

  • 참가자: Prolific을 통해 모집된 29명의 유효한 참가자.
  • 과업: 참가자들은 웹 기반 챗봇 인터페이스를 사용하여 "삼조합(triad)" 명사를 바탕으로 짧은 이야기를 생성하기 위한 프롬프트를 작성하였다.
  • 조건:
    1. 기본(Baseline): 아무런 제한이 없는 표준 프롬프트 제출.
    2. 시간 비용(Time Cost): 프롬프트가 150단어 미만일 경우, 제출 버튼을 계속 누르고 있어 진행 게이지를 채워야 함.
    3. 운동 비용(Motor Cost): 프롬프트가 150단어 미만일 경우, 진행 게이지를 채우기 위해 수직 슬라이더를 위아래로 반복해서 움직여야 함("펌핑").
  • 측정 항목: 프롬프트 단어 수, 프롬프트와 출력물 간의 텍스트 유사도, 심리적 소유감(개인적 소유, 책임감, 연결성의 복합체), NASA-TLX 워크로드 지표(정신적 요구, 신체적 요구, 노력, 좌절감).

• 실험 2: AI 제안을 통한 증강

  • 참가자: 새로운 30명의 참가자.
  • 과업: 실험 1과 동일하지만, 인터페이스가 1초 동안 활동이 없을 때 AI가 생성한 제안(질문 형태)을 표시하도록 증강되었다. 이 제안들은 툴팁 형태로 나타나며 텍스트에 자동으로 삽입되지는 않는다.
  • 설계: 실험 1과 동일한 세 가지 조건(Baseline, Time, Motor)이 사용되었으나, 이제 모두 제안 기능과 통합되었다.
  • 분석: 실험 1(제안 없음)과 실험 2(제안 있음) 사이의 피험자 간(between-subjects) 비교를 통해 제안 기능의 효과를 분리하여 분석하였다.

주요 기여

1. 운동 비용 기법: 본 논문은 짧은 프롬프트를 제출할 때 슬라이더 게이지를 "펌핑"하도록 요구함으로써 운동 비용을 높이는 새로운 상호작용 기법을 소개하며, 이는 시간 기반 지연에 대한 대안을 제시한다.
2. 마찰의 실증적 검증: 시간 기반(누르고 있기) 및 운동 기반(슬라이더 펌핑) 마찰 기법이 기본 조건에 비해 프롬프트 길이와 심리적 소유감을 성공적으로 증가시킨다는 실증적 근거를 제공한다.
3. AI 제안의 영향: 이러한 마찰 기반 기법에 AI 생성 제안을 추가했을 때의 효과를 평가하였으며, 제안이 프롬프트 길이를 더욱 늘리기는 하지만 심리적 소유감의 추가적인 이득을 가져오지는 않는다는 것을 발견하였다.
4. 워크로드 상관관계: 정신적 요구와 노력이 프롬프트 길이 또는 텍스트 유사성 단독보다 심리적 소유감과 더 강력하게 상관되어 있음을 확인하였다.

결과

• 프롬프트 길이: 두 실험 모두에서 Time 조건과 Motor 조건은 Baseline보다 유의미하게 긴 프롬프트 결과를 나타냈다. 실험 2에서는 AI 제안의 추가가 Time 및 Motor 조건의 단어 수를 더욱 증가시켰으나(평균 100단어 이상), Baseline에는 유의미한 영향을 미치지 않았다.
• 심리적 소유감:
  • 실험 1에서 Time과 Motor 조건 모두 Baseline보다 유의미하게 높은 심리적 소유감 점수를 기록했다.
  • 실험 2에서도 Time과 Motor 조건은 여전히 Baseline보다 우수한 성능을 보였다. 그러나 AI 제안의 추가는 제안이 없는 조건들과 비교했을 때 심리적 소유감을 추가로 개선하지 못했다.
• 워크로드: 마찰 기법(Time 및 Motor)은 Baseline에 비해 정신적 요구, 신체적 요구, 노력, 좌절감을 유의미하게 증가시켰다.
• 상관관계:
  • 단어 수와 텍스트 유사성은 심리적 소유감과 약한 양의 상관관계만을 보였다.
  • 정신적 요구와 노력은 심리적 소유감과 중간에서 강한 양의 상관관계를 보였다.
  • 랜덤 포레스트 변수 중요도 분석 결과, 정신적 요구가 심리적 소유감 증가에 가장 중요한 기여자임이 확인되었다.
• 메커니즘: Motor 조건에서 많은 사용자가 슬라이더를 과도하게 펌핑하기보다는 더 많은 단어를 직접 쓰는 쪽을 선택했다. Time 조건에서는 많은 사용자가 처음에 짧은 프롬프트를 제출하려 시도했다가 기다리는 동안 내용을 확장하였다.

의의 및 주장
본 논문은 마찰(시간적 또는 운동적 비용)을 도입하는 간단한 인터페이스 수정이 사용자로 하여 더 길고 상세한 프롬프트를 작성하도록 유도하는 효과적인 메커니즘임을 주장한다. 결정적으로, 저자들은 이러한 증가된 노력이 심리적 소유감으로 직접 연결된다고 주장하는데, 이는 시간과 에너지를 투자하는 과정이 창작물에 대한 사용자의 자기 투입(self-investment)을 강화하기 때문인 것으로 보인다.

저자들은 AI 제안이 사용자의 작가 블록(writer's block)을 극복하고 더 긴 프롬프트를 생성하는 데 도움을 줄 수는 있지만, 그것이 본질적으로 소유감을 높여주는 것은 아니라고 조심스럽게 주장한다. 사실, 소유감을 이끄는 주된 동력은 텍스트의 길이가 아니라 마찰 기법에 의해 요구되는 "작업(work)" 그 자체인 것으로 보인다. 본 논문은 향후 연구에서 다른 형태의 마찰(예: 지각적 비용)을 탐색하고, 이미지 생성이나 설문 응답과 같은 다른 인간-AI 협업 맥락에 이러한 원리를 적용하여 더 깊은 사용자 참여와 소유감을 촉진할 수 있음을 시사한다.