Redefining Academic Performance: The Development of the NK Composite Scholarly Performance Index

Motivation

• Known: 학술 성과 평가에 h-지수, 출판 수, 총 인용 수 등의 문헌계량학적 지표가 널리 사용되고 있으며, 고등교육 기관의 승진 및 보상 시스템에서 중요한 역할을 한다.
• Gap: 기존 지표들은 선택적 커버리지, 인용 조작 취약성, 경력 길이 미조정, 출판 유형 및 공동저자 기여도의 균등 처리 등 근본적인 한계를 가지고 있다.
• Why: 공정하고 표준화된 학술 성과 평가 체계가 필요하며, 특히 문헌계량학 데이터만 이용 가능한 상황에서 서로 다른 경력 궤적의 연구자들을 비교하기 위해 중요하다.
• Approach: NK 지수는 출판량과 인용 영향도를 단일 정규화 점수로 통합하면서 학술 경력 연수, 생산 지속 기간, 저자 기여 계수를 조정하는 시간-기여도 보정 복합 지표를 개발한다.

Achievement

• 포괄적 학술 성과 측정: 더 넓은 범위의 인용 가능 학술 결과물을 통합하여 기존 지표의 선택적 커버리지 문제 해결
• 다층 조정 메커니즘: 학술 나이(academic age), 생산 지속성(productive duration), 저자 기여 계수를 단일 점수에 통합하여 경력 단계별 불공정성 최소화
• 출판 및 인용 유형 차별화: 출판 유형별, 인용 유형별 점수 배정으로 이질적 학술 활동의 가치를 차등 반영
• 정규화된 복합 성과 지수: 출판 수와 인용 영향도를 단일 정규화 점수로 결합하여 학제 간, 경력군 간 비교 가능성 향상

How

• 문헌 검토: 인용 지수, 과학 출판, h-지수 등 기존 성과 측정 지표의 역사적 발전과 한계 분석 (Table 1의 1927~2005년 이후 지표 발전사 정리)
• ISI/Clarivate, Scopus, Google Scholar 등 주요 인용 데이터베이스 검토 및 비교
• 기존 h-지수 변형 지표들(g-지수 등)의 개선 시도 분석
• 학술 경력 길이, 출판 연속성, 저자 기여도를 수학적으로 모델링하는 조정 계수 설계
• 복합 성과 지수의 정규화 방법론 개발

Originality

• 기존 h-지수의 네 가지 주요 한계(선택적 커버리지, 인용 조작, 경력 길이 미조정, 출판 유형 균등 처리)를 체계적으로 정의하고 이를 모두 해결하는 통합 지표 제안
• 학술 나이와 생산 지속 기간의 명확한 구분 및 수학적 조정 방식 도입
• 출판 및 인용 유형 점수화 체계의 도입으로 질적 차별화 실현
• 문헌계량학 데이터만으로 효율성 평가가 아닌 성과/영향도 측정 지표로 위치 지정

Limitation & Further Study

• 본문 발췌에서 NK 지수의 구체적 계산 공식과 가중치 결정 기준이 제시되지 않음
• 실제 학자 데이터에 대한 검증(validation) 결과 및 기존 지표와의 비교 분석 결과 미제시
• 학제 간(자연과학, 사회과학, 인문학) 학술 활동 패턴의 이질성에 대한 구체적 고려 방식 부재
• 인용 조작, 자기인용 등 비정상적 인용행동에 대한 탐지/배제 메커니즘 미제시
• 후속 연구: NK 지수의 경험적 검증 및 기존 지표와의 예측 타당성 비교, 학제별 가중치 최적화, 이상 인용행동 탐지 알고리즘 개발

Evaluation

총평: NK 지수는 h-지수의 구조적 한계를 명확히 진단하고 경력 길이, 출판 지속성, 저자 기여도를 통합 조정하는 포괄적 성과 지표를 제안하여 학술 평가의 공정성을 크게 향상시킬 수 있는 잠재력이 있다. 다만 구체적 계산 알고리즘, 경험적 검증, 학제 간 적용성에 대한 상세 논의가 필요하다.