Beyond Citations: Comparing Scholarly, Policy, and Patent Impact Across the FT50 Journals

기술 요약: 인용을 넘어: FT50 저널 간의 학술적, 정책적, 특허 영향력 비교

문제 제기
Financial Times 50(FT50) 저널 목록은 전 세계 경영대학의 채용, 승진 및 인증을 위한 주요 지표로 활용된다. 그러나 이 목록은 종종 모든 포함된 저널이 유사한 품질과 영향력을 보유하고 있다는 전제하에, 동질적인 우수성 계층으로 취급되곤 한다. 저자들은 기존의 평가 방식이 단일 차원(인용 횟수)에 의존하거나 특정 학문 분야의 단면만을 집중적으로 다루는 경향이 있다는 점을 지적하며 이러한 가정을 반박한다. 이러한 접근 방식은 정책적 수용이나 기술적 도달 범위와 같은 영향력 채널의 잠재적 이질성을 포착하지 못하며, 인용 기반 지표에 영향을 미치는 "굿하트 법칙형 쇠퇴(Good-style decay)"와 규모 증가에 따른 희석 효과를 간과한다. 본 연구의 핵심 질문은 FT50이 균일한 고품질 출처를 식별하는 것인지, 아니면 서로 양립할 수 없는 다양한 유형의 학술 활동을 하나의 묶음으로 분류하고 있는 것인지에 관한 것이다.

연구 방법론
본 연구는 53개의 저널 패널(2026년 업데이트 이전의 FT50 저널 50개와 2026년에 추가된 3개의 저널, 그리고 비교를 위해 삭제된 3개의 저널을 포함)을 사용하여 비교 교차 저널 분석을 수행한다.

• 데이터 소스: 본 분석은 세 가지 소스의 결합된 데이터셋을 활용한다:
  • Scopus/SciVal: 서지 데이터 및 인용 지표용.
  • Overton: 공공 정책 문서 인용용.
  • 특허청: 5개 주요 특허청(EPO, USPTO, UK IPO, JPO, WIPO)의 특허 인용 데이터.
• 분석 기간: 헤드라인 분석은 2005년부터 2019년까지의 출판물을 대상으로 한다. 이 기간은 특히 특허 심사 및 정책 색인화에 내재된 시차를 고려하여, 인용, 정책, 특허 축적에 충분한 시간을 확보하기 위해 선정되었다. 민감도 분석은 대체 기간(2005–2014, 2010–2019, 2015–2019)을 사용하여 수행되었다.
• 지표: 규모와 분야를 정규화하기 위해 7가지 논문당 지표를 산출하였다:
  1. 학술적 영향력 (3개): 분야 가중 인용 영향력(FWCI), 상위 10% 비율, 분야 가중 조회수 영향력.
  2. 정책적 도달 범위 (2개): 발표된 논문당 정책 인용 횟수, 최소 1개 이상의 정책 문서에 의해 인용된 논문의 비율.
  3. 기술적 도달 범위 (2개): 발표된 논문당 특허 인용 횟수, 최소 1개 이상의 특허에 의해 인용된 논문의 비율.
• 분석 접근 방식: 저널들을 각 지표에 따라 순위를 매겼으며, 이 7개 순위의 평균으로부터 합성 순위를 도출하였다. 또한, 인용 영향력(x축)과 사회적 영향력(정책 + 특허)(y축)으로 정의된 2차원 평면에 저널들을 시각화하기 위해 z-score를 사용하여 "FT50 품질 지도"를 구축하였다. 안정성은 서로 다른 시간 창(time window) 간의 Kendall's $\tau$ 상관관계를 통해 평가되었다.

주요 결과

1. 현저한 이질성: 논문당 정규화 이후에도 FT50 저널들은 엄청난 격차를 보인다. 예를 들어, Quarterly Journal of Economics는 Contemporary Accounting Research보다 논문당 정책 인용 횟수가 약 250배 더 많다. 마찬가지로, MIS Quarterly는 상당한 특허 인용을 기록하는 반면, Academy of Management Review는 거의 전무하다.
2. 채널의 직교성(Orthogonality): 인용, 정책, 특허 영향력은 대체로 독립적인 차원으로 작동한다. FWCI와 정책 인용 간의 상관관계는 낮으며(0.27), FWCI와 특허 인용 간의 상관관계는 음(-)의 관계를 보인다(-0.12). 두 가지 채널(정책 및 특허) 모두에서 논문당 중간값 이상의 도달 범위를 달야하는 저널은 존재하지 않는다(품질 지도의 우상단 사분면은 비어 있다).
3. 학문적 전문화:
   • 정책 영향력: 엘리트 경제학 저널들이 주도하며(예: American Economic Review, Journal of Political Economy), 이들이 정책 인용 흔적의 65%를 차지한다.
   • 특허 영향력: 정보 시스템, 마케팅, 운영 관리(Operations Research) 저널들이 주도한다.
   • 인용 영향력: 경영학 저널들이 원시 인용 횟수와 조회수를 독점하지만, 사회적 채널에 대한 기여도는 8% 미만이다.
4. 합성 순위의 변화: 정책 및 특허 지표를 합성 순위에 포함했을 때, 인용 전용 순위와 비교하여 거의 절반에 가까운 저널(53개 중 25개)이 사분위 위치를 변경한다. 엘리트 경제 및 재무 저널들은 일반적으로 합성 순위에서 상승하는 반면, 인용 횟수는 높지만 사회적 도달 범위가 낮은 많은 경영학 저널들은 하락한다.
5. 안정성: 상위 및 하위 계층의 식별은 서로 다른 출판 연도 창 사이에서도 안정적이며, 서로 다른 창에서 도출된 순위 간의 Kendall's $\tau$ 값은 0.69에서 0.89 사이로 나타났다.
6. 2026년 리스트 업데이트: 2026년 개정안(경영학 저널 3개를 삭제하고 Academy of Management Annals, American Sociological Review, Psychological Science를 추가)은 본 연구의 결과와 밀접하게 일치한다. 삭제된 저널들은 합성 순위에서 하위 사분위에 속해 있었던 반면, 추가된 저널들은 높은 계층에 위치한다. 다만, 그 어떤 저널도 "높은 정책 + 높은 특허"의 간극을 채우지는 못했다.

의의 및 주장
본 논문은 "올바른" 저널 목록을 결정하려는 것이 아니라, 목록 내부의 품질 스펙트럼을 특징짓는 것을 목표로 한다. 본 연구의 주요 기여는 기술적(descriptive)이며, 인용 기반의 이분법적인 "포함 또는 제외"라는 FT50의 라벨이 실질적인 영향력의 광범한 스펙트럼을 가리고 있음을 밝히는 데 있다.

• 영향력 차원의 독립성: 본 연구는 학술적 인용 지표가 정책적 또는 기술적 영향력의 열등한 대리 지표(proxy)임을 입증한다. 인용에만 의존하는 것은 연구 영향력의 중요한 차원을 간과하는 것이다.
• 현재 평가의 한계: 결과는 학술적 인용에만 기반한 평가가 연구 영향력의 전체 범위를 포착하기에는 불충분함을 시사한다.
• 제시 방식에 대한 권고: 저자들은 "채널을 인식하는(channel-aware)" 또는 다층적인 FT50 목록 제시 방식이, 연구 평가에서의 근본적인 역할을 변경하지 않으면서도 학장들과 인증 기관들에게 저널의 이질성을 더 잘 전달할 수 있다고 제안한다.
• 제한된 범위: 저자들은 본 분석이 FT50 내부에서의 분석이며, 이 저널들을 비(非) FT50 엘리트 저널 집단과 비교하지 않았음을 명시한다. 또한, 궤적 분석은 미래의 성과를 정밀하게 예측하기보다는 방향성을 표시하기 위한 단순 선형 외삽(naive linear extrapolation)으로 제시되었다.

요약하자면, 본 논문은 FT50가 단일한 우수성 계층이 아니라, 서로 구별되며 때로는 직교하는 영향력 프로필을 가진 저널들의 집합이라고 주장한다. 2026년 업데이트는 품질의 정의를 근본적으로 확장하기보다는, 기존의 영향력 프로필을 정교화하는 것으로 보인다.