Anti-establishment sentiment on TikTok: Implications for understanding influence(rs) and expertise on social media

기술적 요약: 틱톡의 반체제 감정

문제 제기
제도에 대한 대중의 불신과 반체제 견해가 특히 미국에서 증가하고 있으며, 이로 인한 결과는 허위 정보부터 정치적 폭력까지 다양합니다. 소셜 미디어 플랫폼이 이러한 견해를 증폭시킬 수 있는 것으로 알려져 있지만, 겉보기에 정치적인 내용이 아닌 영역에서 반체제 감정 (AES) 이 어느 정도 나타나는지는 여전히 불분명합니다. 기존 연구는 주로 정치적 극단주의나 음모론에 초점을 맞추고 있어, 콘텐츠 제작자들이 자주 전문가로 자신을 위치시키는 금융 및 웰빙과 같은 인기 있는 비정치적 주제 영역에서 AES 가 어떻게 나타나는지에 대한 이해에는 공백이 있습니다. 본 연구는 틱톡에서 AES 의 prevalence(보편성), 주제별 변이, 사용자 참여 패턴, 그리고 "대중"과 "엘리트" 사이의 분열을 구성하는 데 사용되는 언어적 전략을 조사합니다.

방법론
본 연구는 틱톡 콘텐츠에서 AES 를 탐지하기 위해 인간 주석과 지도 학습 머신러닝을 결합한 계산적 접근법을 사용합니다.

• 데이터 수집:

  • 틱톡: 틱톡 연구 API 를 사용하여 2022 년 1 월 1 일부터 2023 년 12 월 31 일까지 26,783 개의 동영상과 206,350 개의 댓글을 수집했습니다. 데이터셋은 세 가지 주제 영역을 다룹니다: 음모론(예: "conspiracy", "flatearth"), 금융(예: "stocks", "crypto"), 웰빙(예: "wellness", "selfcare").
  • 유튜브: 일반화 가능성을 테스트하기 위해 유사한 키워드를 사용하여 2023 년 1 월부터 2024 년 12 월까지 유튜브 API 를 통해 1,013 개의 게시물을 비교 데이터셋으로 수집했습니다.
  • 포유 페이지 (FYP): 주제별 검색 없이 일반적인 사용자의 경험을 시뮬레이션하기 위해 48 개의 "sock puppet" (가장) 계정을 생성하여 35 일 동안 FYP 를 탐색하게 하여 37,012 개의 동영상을 생성했습니다.

• 정의 및 주석:

  • AES 정의: AES 는 "대중"의 이익에 반하는 방식으로 작동하는 공공 서비스 기관 (정부, 미디어, 과학, 금융, 건강) 에 대한 불신이나 비판의 표현으로 운영화됩니다.
  • 인간 주석: Prolific 을 통해 모집된 크라우드 소싱 주석자들은 AES 및 비 AES 콘텐츠 (동영상 게시물 및 댓글 상호작용 포함) 의 예시를 포함한 엄격한 교육을 받았습니다. 주석자들은 동영상 게시자의 의도와 댓글의 동의 여부를 표시했습니다. 과정을 검증하기 위해 도메인 전문가들이 103 개의 동영상으로 구성된 "Gold Set"을 주석했습니다. 여러 주석자의 레이블을 결합하기 위한 최적의 방식으로 Dawid-Skene 집계 방법이 선정되었습니다.
  • 머신러닝: 나머지 레이블이 지정되지 않은 데이터는 지도 학습을 사용하여 처리되었습니다. 저자들은 SentenceBERT + SVM, SentenceBERT + LightGBM, 그리고 BERT, DistilBERT, RoBERTa, DistilRoBERTa 를 포함한 사전 훈련 언어 모델 (PLM) 등 여러 모델을 비교했습니다.
  • 특성 공학: 모델은 "순수 텍스트" 특성과 "텍스트 + 카테고리" 특성으로 테스트되었습니다. PLM 의 경우, 범주형 정보 (음모론, 금융, 웰빙) 가 텍스트 표현과 연결된 학습된 임베딩 레이어를 통해 통합되었습니다.

• 언어적 분석:

  • Linguistic Inquiry and Word Count (LIWC) 소프트웨어를 사용하여 AES 대 비 AES 콘텐츠의 언어적 스타일을 분석했으며, 진정성(개인적 대 비개인적), 권위(영향력과 힘), 도덕성(종교 및 죽음 관련 주제) 의 세 가지 주제에 초점을 맞췄습니다.

주요 결과

• 주제별 보편성:

  • 음모론: AES 가 매우 흔하여 게시물의 **45.1%**에서 나타납니다.
  • 금융: AES 는 상대적으로 드물어 게시물의 **4.3%**에서 발견됩니다.
  • 웰빙: AES 는 매우 드물어 게시물의 **1.3%**에서만 발견됩니다.
  • FYP: 일반적인 포유 페이지 샘플에서 AES 는 콘텐츠의 **1% 미만 (0.48%)**에 나타나, 광범위하고 비특정적인 관심을 가진 사용자는 특정 음모론 콘텐츠를 찾는 사용자에 비해 AES 를 최소한으로 접하게 됨을 시사합니다.
  • 크로스 플랫폼: 보편성의 순위 (음모론 > 금융 > 웰빙) 는 유튜브 샘플에서도 유효했으나, 유튜브의 음모론 콘텐츠는 틱톡 (45%) 보다 AES 표현이 적었습니다 (20%).

• 참여 패턴:

  • 음모론: AES 게시물은 비 AES 게시물보다 좋아요, 댓글, 공유가 적었습니다.
  • 금융: AES 게시물은 비 AES 게시물보다 댓글과 공유는 약간 많았으나 좋아요는 적었습니다.
  • 웰빙: AES 게시물은 댓글은 더 많았으나 공유와 좋아요는 현저히 적었습니다.
  • 댓글 동의: 음모론 카테고리에서 AES 게시물에 대한 댓글은 동의율이 높았으며 (69.3%), 비 AES 게시물과 비슷하거나 더 높았습니다. 이는 참여가 종종 반박이 아닌 동의로 인해 발생함을 나타냅니다.

• 표적 기관:

  • 미국 정부는 모든 카테고리에서 가장 흔한 표적입니다.
  • NASA는 음모론 콘텐츠 (예: 평평한 지구 이론) 에서 빈번히 표적이 됩니다.
  • 미국 의료/빅파마는 웰빙 콘텐츠의 구체적인 표적입니다.
  • 빅뱅은 금융 콘텐츠에 등장합니다.

• 언어적 스타일:

  • 진정성: 비 AES 콘텐츠는 진정성 (개인적, 1 인칭 단수) 점수가 더 높았으며, AES 콘텐츠는 집단적 정체성 (1 인칭 복수) 과 "내집단/외집단" 역학에 더 의존했습니다.
  • 권위: AES 콘텐츠는 더 높은 "Clout" 점수를 보여 더 권위 있고 자신감 있는 어조를 나타냈습니다.
  • 도덕성: AES 콘텐츠는 종교 관련 및 죽음 관련 단어가 현저히 더 포함되어 문제를 도덕적 또는 실존적 차원에서 프레임화했습니다.
  • 성별: AES 게시물은 비 AES 콘텐츠에 비해 남성 언급은 더 많고 여성 언급은 더 적었습니다.

• 모델 성능:

  • Text + Category 임베딩을 사용한 RoBERTa 모델이 이진 F1 점수 0.728로 최고의 성능을 달성하여 순수 텍스트 베이스라인을 능가했습니다.

주요 기여

1. AES 의 체계적 측정: 본 연구는 틱톡의 비정치적 영역 (금융 및 웰빙) 에서 AES 보편성을 대규모로 체계적으로 분석하여, 그러한 감정이 모든 소셜 미디어 콘텐츠에 보편적이라는 가정을 도전합니다.
2. 방법론적 프레임워크: 인간-루프 주석과 카테고리 인식 딥러닝 모델의 결합을 사용하여 AES 를 탐지하는 견고한 파이프라인을 도입하며, 주제별 범주형 데이터를 통합하면 탐지 정확도가 향상됨을 입증합니다.
3. 언어적 특성화: 이 논문은 콘텐츠 제작자들이 "대중 대 엘리트" 서사를 구성하는 데 사용하는 구체적인 언어적 표지 (낮은 진정성, 높은 권위, 도덕적/종교적 프레임) 를 상세히 기술합니다.
4. 플랫폼 비교: 틱톡과 유튜브 간의 AES 보편성을 비교하여 음모론 콘텐츠 밀도에서의 차이를 지적합니다.

의의 및 주장
저자들은 AES 가 음모론 콘텐츠의 지배적인 특징이지만, 틱톡의 금융 및 웰빙과 같은 비정치적 영역에서는 널리 퍼져 있지 않다고 주장합니다. 연구는 AES 에 대한 노출이 사용자 행동에 크게 의존함을 시사합니다: 일반적인 FYP 를 탐색하는 사용자는 AES 를 접할 가능성이 낮지만, 적극적으로 음모론 콘텐츠를 찾는 사용자는 이를 빈번히 접하게 됩니다.

이 논문은 비정치적 틈새시장에서 현재 AES 가 드물지만, 콘텐츠 제작자가 대체 전문가로 자신을 위치시키는 소셜 미디어의 인센티브 구조가 그러한 견해를 조장할 수 있다고 결론지었습니다. 저자들은 더 넓은 정치 지형에서 반체제 감정이 상승함에 따라 이러한 콘텐츠의 보편성이 증가할 수 있다고 지적합니다. 그들은 AES 가 나타나는 조건(주제, 플랫폼, 사용자 의도) 을 이해하는 것이 민주주의 건강과 대중 신뢰에 대한 잠재적 영향을 해결하는 데 중요하다고 강조합니다. 연구는 인과적 주장에 대해서는 겸손하게 접근하며, 참여 패턴은 다양하지만 AES 에 대한 반복 노출의 장기적 효과는 추가적인 종단 연구가 필요하다고 명시합니다.