From Perception to Cognition: How Latency Affects Interaction Fluency and Social Presence in VR Conferencing

이 논문은 가상현실 (VR) 회의에서 지연 시간이 사용자 경험에 미치는 영향을 분석하기 위해 전통적인 화상 회의와 비교하여 상호작용의 유창성과 사회적 존재감을 평가하고, 이를 통해 몰입형 가상 환경 최적화를 위한 통찰을 제공합니다.

Jiarun Song, Ninghao Wan, FuZheng Yang, Weisi Lin

게시일 Wed, 11 Ma
📖 3 분 읽기☕ 가벼운 읽기

Each language version is independently generated for its own context, not a direct translation.

🎭 제목: "가상 회의실에서의 '지연'이 대화를 어떻게 망치는가?"

상상해 보세요. 친구와 가상 현실 (VR) 안경을 쓰고 만나서 이야기를 나누고 있습니다. 그런데 친구가 말을 할 때, 내 귀에 소리가 0.5 초 정도 늦게 들린다면 어떨까요? 혹은 내가 손을 흔들었을 때 친구가 그걸 1 초 뒤에 알아차린다면요?

이 논문은 바로 이런 **'시간 차이 (지연)'**가 두 가지 중요한 것에 어떻게 영향을 주는지 실험을 통해 밝혀냈습니다.

  1. 대화의 흐름 (Interaction Fluency): "얘기가 잘 이어지는가?" (느낌적인 느낌)
  2. 함께 있다는 느낌 (Social Presence): "상대방이 진짜 내 감정을 이해하고 있는가?" (마음의 연결)

🔍 실험 내용: "세 가지 대화 게임"

연구진은 참가자들을 두 그룹으로 나눴습니다.

  • 그룹 A: 일반 PC 화상 회의 (줌, 팀즈 같은 2D 화면)
  • 그룹 B: VR 안경을 쓰고 아바타 (가상 캐릭터) 로 대화하는 3D 공간

그리고 두 그룹에게 세 가지 다른 대화 과제를 주며 의도적으로 지연 시간을 조절했습니다.

  1. 숫자 세기 게임 (Counting): "1, 2, 3..." 하고 빠르게 번갈아 말하기. (뇌를 거의 쓰지 않는 빠른 반응)
  2. 셈하기 게임 (Arithmetic): "2 더하기 3 은?" 같은 간단한 수학 문제. (약간 생각해야 함)
  3. 자유 대화 (Free Talk): 날씨나 취미 등 자유롭게 이야기하기. (생각하고 말을 조직해야 함)

💡 주요 발견 1: "대화의 흐름"은 VR 이 더 잘 참는다!

비유: VR 은 **'가상의 가면'**을 쓴 상태입니다.

  • 일반 화상 회의 (PC): 친구의 얼굴이 바로 보입니다. 친구가 말을 늦게 하면 "아, 내 친구가 딴생각을 했나?"라고 바로 생각합니다. 그래서 지연이 조금만 생겨도 대화가 끊긴 것처럼 느껴져서 "얘기가 안 이어진다"고 불만을 냅니다.
  • VR 화상 회의: 친구는 '가상 캐릭터 (아바타)'입니다. 우리는 "아, 이 캐릭터는 내 친구가 조종하는 거니까, 기술적인 문제가 있을 수도 있겠지"라고 기술적인 지연으로 쉽게 받아칩니다.
    • 결과: 같은 지연 시간이라도, VR 이 PC 보다 대화가 더 매끄럽게 느껴졌습니다. 사람들은 VR 에서의 지연을 더 잘 참아냈습니다. 마치 게임 캐릭터가 늦게 움직여도 "아, 네트워크가 좀 느린가 보다"라고 생각하는 것과 비슷합니다.

💡 주요 발견 2: "마음의 연결"은 VR 이 더 예민하다!

비유: VR 은 **'정교한 인형극'**입니다.

대화의 흐름은 잘 참아냈지만, **상대방의 감정을 읽는 능력 (사회적 존재감)**은 달랐습니다.

  • 지연이 적을 때 (100ms 미만): VR 이 훨씬 좋습니다. 아바타가 내 옆에 있고, 3D 공간에서 함께 있다는 느낌이 강해서 "진짜 친구와 대화하는 것 같다"고 느꼈습니다.
  • 지연이 커질 때 (1 초 이상): VR 의 단점이 드러납니다.
    • PC: 친구의 얼굴 표정이 늦게 전달되더라도, "아, 친구가 웃고 있구나"라고 이미지만으로도 감정을 유추할 수 있습니다.
    • VR: 아바타의 표정이나 손짓이 늦게 전달되면, "내 친구가 내 말을 이해했을까?", "화난 건가?"라고 의심하기 시작합니다. 아바타는 실제 인간이 아니기 때문에, 작은 지연이라도 감정을 읽는 데 치명적입니다.
    • 결과: 지연이 길어지면 VR 에서의 '함께 있다는 느낌'이 PC 보다 훨씬 빠르게 무너졌습니다.

🧠 핵심 결론: "느낌"과 "이해"는 다르다

이 연구는 우리에게 중요한 교훈을 줍니다.

  1. 대화가 끊기지 않게 하려면 (Fluency): VR 은 지연을 잘 견디는 편입니다. 빠른 반응이 필요한 게임이나 간단한 대화에서는 VR 이 나쁠 게 없습니다.
  2. 서로의 마음을 이해하려면 (Social Presence): VR 은 지연에 매우 민감합니다. 1 초 이상의 지연이 생기면, 아바타를 통해 상대방의 감정을 읽는 것이 매우 어려워집니다.

최종 조언:
VR 회의를 할 때는 대화의 흐름보다는 상대방의 감정을 정확히 전달하는 것이 더 중요합니다. 따라서 지연 시간을 1 초 (1000ms) 이하로 꼭 유지해야, 상대방이 "너 내 말 알아듣고 있어?"라고 의심하지 않고, 진짜 함께 있다는 느낌을 느낄 수 있습니다.


📝 한 줄 요약

"VR 회의에서는 대화가 끊기는 것 (흐름) 보다는 상대방의 감정이 늦게 전달되는 것 (마음) 이 더 큰 문제다. 특히 지연이 1 초를 넘으면, 아바타를 통한 마음의 연결은 쉽게 무너진다."