Redefining Academic Performance: The Development of the NK Composite Scholarly Performance Index

Motivation

• Known: h-지수, 인용 횟수, 출판 수 등 기존 bibliometric 지표들이 학술 성과 평가에 널리 사용되고 있다. 그러나 이들은 인용 조작 취약성, 이질적 출판 유형 차별화 부족, 경력 길이 미조정 등의 제한점을 가지고 있다.
• Gap: 기존 지표들은 선택적 출판물 포함, 인용 조작 가능성, 경력 길이 및 연속성 미조정, 공저자 기여도 균등 취급 등의 문제를 해결하지 못하고 있다. 이러한 한계들을 종합적으로 해결하는 통합 지표의 필요성이 존재한다.
• Why: 대학의 승진, 임용, 보상 시스템에서 공정한 학술 성과 평가가 필수적이다. bibliometric 데이터만으로도 서로 다른 경력 궤적을 가진 학자들을 공정하게 비교할 수 있는 표준화된 지표가 요구된다.
• Approach: NK 지수는 광범위한 인용 가능 학술 산출물, 출판·인용 유형별 점수, 저자 기여 계수, 학술 경력 기간과 생산적 지속 기간 매개변수를 하나의 정규화된 복합 성과 점수로 통합한다.

Achievement

• 포괄적 출력 포함: 더 넓은 범위의 인용 가능 학술 산출물을 통합하여 선택적 포함의 문제를 완화
• 다차원 조정 메커니즘: 출판·인용 유형 점수, 저자 기여 계수, 학술 경력 기간(academic age), 생산적 지속 기간을 종합적으로 고려
• 시간 및 기여도 정규화: 경력 길이의 차이를 보정하여 서로 다른 경력 궤적의 학자들을 공정하게 비교 가능
• 조작 저항성 강화: 인용 조작에 대한 취약성을 감소시키는 설계 원리 적용

How

• 광범위한 bibliometric 데이터 수집 (Web of Science, Scopus 등의 인용 색인)
• 출판물의 유형 분류 및 인용 패턴 분석을 통한 가중치 설정
• 공저자 기여도 계수 산정 방법론 개발
• 학술 경력 기간(academic age)과 생산적 기간(productive duration) 매개변수 정의
• 위의 모든 요소를 통합하는 복합 점수 공식 개발 및 검증
• 문헌 검토를 통한 기존 h-지수 및 변형 지수들과의 비교 분석

Originality

• 기존 h-지수의 주요 한계점들(경력 길이 미조정, 출판 연속성 미고려, 공저자 기여도 균등 취급)을 동시에 해결하는 통합 지표 제시
• 시간 기반 정규화(academic age)와 생산성 지속 기간(productive duration)을 명시적으로 포함한 새로운 접근법
• 출판·인용 유형별 차별화된 점수 체계를 도입하여 이질적 출판물을 공정하게 평가
• bibliometric 성과 지수로서의 명확한 개념적 위치 설정 (효율성 지수 대비)

Limitation & Further Study

• 본문 발췌본에서는 NK 지수의 구체적인 수식과 계산 방법이 제시되지 않아 실제 적용 가능성 평가 어려움
• 다양한 학문 분야에서의 검증 및 실증 분석 결과 부재 - 실제 학자 집단에 대한 적용 사례 필요
• 기존 지표들과의 실증적 비교 분석 및 타당성 검증 필요
• 인용 데이터베이스의 선택(WoS vs Scopus)에 따른 지수 값의 민감도 분석 필요
• 국가, 학과, 경력 단계별 상이한 출판 관행에 대한 보정 메커니즘의 추가 개발

Evaluation

총평: 본 논문은 학술 성과 평가의 오랫동안 지적된 문제들을 종합적으로 해결하려는 의도 있는 연구로, 시간·기여도 조정 등 혁신적 요소를 포함하고 있다. 다만 구체적 수식, 실증 검증, 다학제 적용 사례 등이 보완되면 실무적 영향력이 크게 향상될 것으로 예상된다.