The disruption index suffers from citation inflation: Re-analysis of temporal CD trend and relationship with team size reveal discrepancies

Essence

Fig. 1. Citation inﬂation is an inextricable feature of citation networks. The disruption index 𝐶𝐷𝑝is calculated accordi

인용 지수(CD)는 참고문헌 길이의 증가로 인한 인용 인플레이션(Citation Inflation)으로 인해 체계적으로 감소하며, 이는 혁신의 실제 감소가 아닌 측정 편향을 반영한다.

Known: disruption index (CD)는 학술 출판 및 특허 인용 네트워크에서 혁신 속도를 측정하기 위해 개발되었으며, Park et al. (2023)은 CD가 시간에 따라 감소한다고 보고했다.
Gap: CD의 장기적 감소 추세가 실제 혁신 감소를 의미하는지, 아니면 측정 편향을 반영하는지에 대한 명확한 구분이 부재하였고, 참고문헌 길이 증가의 인과적 영향을 직접 검증한 연구가 없었다.
Why: 혁신 측정의 정확성은 과학 정책 수립 및 기관 관리에 근본적으로 중요하며, CD의 편향을 파악하지 못하면 잘못된 정책 결정으로 이어질 수 있다.
Approach: 수학적 추론, 계산 시뮬레이션, PNAS/PNAS Plus 준실험적 비교(참고문헌 길이 차이 제외 동일), 대규모 다변량 회귀 분석(780만 개 논문, 1995-2015)을 통해 citation inflation 가설을 검증한다.

Fig. 4. Quasi-experimental test and validation of the CI hypothesis: counterfactual juxtaposition of research articles p

Citation Inflation의 인과관계 입증: 참고문헌 길이 증가가 CD를 체계적으로 감소시키는 구조적 메커니즘임을 수학적 및 실험적으로 증명
행동적 메커니즘 식별: 자기인용 관행 등 기술-사회적 요인으로 인한 행동적 변화가 CD 감소의 또 다른 원인임을 규명
재분석을 통한 추세 수정: CD가 2005-2015년 기간에 증가했으며, 시간 기반 감소 추세는 데이터 품질 문제로 인한 것임을 실증
팀 규모 관계의 재평가: CD와 팀 규모의 부정적 관계는 전체 크기 효과가 매우 작으며, 8명 이상의 공동저자 시 양의 관계로 전환됨을 발견

Fig. 3. Computational simulation of growing citation networks: after ‘turning oﬀ’ CI, the systematic decline in 𝐶𝐷revers

PNAS Plus 준실험은 2011-2015년 5년간의 특정 저널 데이터로 제한되어 다른 학문 분야나 시기에 대한 일반화에 주의 필요
Behavioral mechanism의 양적 정량화가 제한적이며, 자기인용 관행의 변화 원인에 대한 심층 분석 부재
장기적 시간대(1995-2015년)에서 인용 관행의 급격한 변화가 있었는지 여부에 대한 상세한 추적 분석 부족
후속연구는 다른 학문 분야(life sciences, engineering 등)에 대한 재검증과 citation inflation 조정 방법론 개발 필요