Citation Analysis as a Tool in Journal Evaluation

Motivation

• Known: 1927년 Gross and Gross 이후 산발적으로 저널 네트워크의 일부를 분석해왔으나, 전체 저널 네트워크에 대한 체계적 지도가 부재한 상태이다.
• Gap: 기존 연구들은 수작업 데이터 수집의 한계로 인해 저널 수, 학문 분야, 시간 범위가 제한되어 있어 전체 과학 저널 시스템의 통합적 이해가 부족하다.
• Why: 저널 네트워크를 이해하면 과학 정책 수립, 학술 커뮤니케이션 체계 개선, 과학 발전 추적이 가능하여 과학 정보 시스템의 효율성 향상에 기여한다.
• Approach: ISI의 Science Citation Index 데이터베이스(1969년 4분기 약 100만 건 인용, 2200종 저널)를 활용하여 대규모 기계 가독 형식 데이터를 컴퓨터로 조작하고 인용 패턴을 분석한다.

Achievement

• 저널 인용 빈도 분석: 저널별 인용 횟수를 시간대별로 분류하여 저널의 영향력과 이용 패턴을 정량화
• 인용 네트워크 구조화: 인용 저널(cited journal)과 인용하는 저널(citing journal)의 관계를 명확히 하여 저널 간 연결성 파악
• 시계열 인용 분포: 각 저널의 인용이 발행 시기별로 어떻게 분포하는지 추적하여 저널의 영향력 지속성 평가
• 대규모 데이터 기반 방법론: 수작업 대신 컴퓨터를 활용한 자동화된 분석으로 과학 저널 전체의 체계적 평가 가능화

How

• Science Citation Index 데이터베이스에서 1969년 4분기 모든 저널 참고문헌 추출
• 저널별 인용 빈도(citation frequency) 집계 및 시간대별 분류(1960~1969년)
• 인용된 저널(cited journal)의 특성과 인용하는 저널(citing journal)의 패턴 상호 분석
• 다학제적(multidisciplinary), 장기간(10년 이상), 대규모 표본(약 100만 건)의 통계 자료 활용

Originality

• 대규모 통합 데이터베이스 활용: 기존의 제한된 수작업 분석에서 벗어나 전국적·다학제적 SCI 데이터베이스 전체 활용
• 자동화된 기계 가독 형식 분석: 컴퓨터 기반 데이터 조작으로 수동 분석의 한계 극복
• 시간 차원 추가: 인용 시기별 분포를 분석하여 저널의 영향력 변화 추적
• 저널 네트워크의 체계적 구조화: 인용 관계를 시각적·통계적으로 명확히 하여 과학 커뮤니케이션 네트워크 이해

Limitation & Further Study

• 분석이 1969년 4분기 단일 시점 데이터에 기반하여 장기 추세 파악에 제한적
• SCI 커버리지가 영어권 저널 중심이어서 비영어권 저널 및 출판물 대표성 부족
• 인용 빈도 자체가 저널 품질의 완전한 지표가 될 수 없으며, 인용의 긍정성/비판성을 구분하지 못함
• 후속 연구로 장기간 다년도 데이터의 누적 분석, 학문 분야별 인용 문화 차이 분석, 인용 품질 평가 지표 개발이 필요

Evaluation

총평: 본 논문은 Science Citation Index의 대규모 기계 가독 데이터를 처음으로 체계적으로 활용하여 과학 저널 평가의 새로운 방법론을 제시하였으며, 컴퓨터 기반 분석으로 기존의 수작업 한계를 극복하여 과학 정보학 분야에 매우 높은 기여도를 갖는다.