Rethink Funding by Putting the Lottery First

Motivation

• Known: 동료 심사와 연구비 배분 결정은 전체 연구비 생산성을 예측하는 데 낮은 예측력을 가지며, 심사자들의 지위, 명성, 기관 소속, 성별, 인종, 장애 등과 관련된 깊은 편견이 존재한다.
• Gap: 기존 로또 시스템은 최종 단계의 동점자 결정 도구로만 사용되어 초기 지원 단계의 선택 편견(entry bias)과 심사 편견(review bias)을 해결하지 못한다.
• Why: 연구비 배분은 과학의 방향을 결정하며 미래 지식을 형성하므로, 편견 없는 공정한 배분과 소외 집단의 참여 기회 확대가 중요하다. 또한 현재 시스템의 막대한 자원 낭비를 줄일 수 있다.
• Approach: 연구비 신청 과정의 초기 단계에 자동 선택 또는 등록 기반의 사전 로또(pre-lottery)를 도입하고, GrantInq라는 Shiny 앱을 통해 다양한 자금 배분 시나리오의 비용, 다양성, 품질 영향을 시뮬레이션한다.

Achievement

Fig. 2 | Evaluation of the four exemplary funding scenarios with regard to

• 초기 로또 시스템 제안: 제안서 작성 전 단계에서 로또를 실시하여 지원 단계의 진입 편견을 원천적으로 차단
• 비용 효율성 증대: 거절될 제안서 작성에 소비되는 연구자, 심사자, 기관의 막대한 자원 낭비 감소
• 다양성 증진: 역사적으로 소외된 집단(여성, 초기 경력 연구자, 장애인, 유색인종 등)의 동등한 참여 기회 제공
• 혁신성 촉진: 보수적 점증적 연구보다 혁신적이고 위험한 아이디어 채택 용이성 증가
• GrantInq 시뮬레이션 도구: 정책 입안자와 펀딩 기관이 다양한 자금 배분 모델의 영향을 정량적으로 평가할 수 있는 접근 가능한 프레임워크 제공

How

Fig. 1 | Exemplary grant application scenarios. The flowchart illustrates four

• 주어진 연구 분야에 자격 있는 모든 연구자를 자동으로 포함하거나 온라인 등록 기반으로 로또 입장
• 임의 선정된 연구자만이 제안서 작성 및 제출 단계로 진행 가능(기존과 역순의 과정)
• 선정된 연구자의 제안서에 대해 경쟁적 심사 대신 규범적 심사(normative review) 실시
• 사전에 확보된 자금으로 심사 통과 제안서에 자동 지원(선택적 거절 제거)
• GrantInq 앱으로 1,000회 시뮬레이션을 통해 비용, 다양성, 아이디어 품질 지표 비교 분석

Originality

• 로또 시스템의 도입 시점을 혁신적으로 변경(최종 단계→초기 단계)하여 근본적인 편견 제거 시도
• 기존의 동점자 결정 도구가 아닌 입장 자체를 로또로 선정하는 역발상적 접근법
• 연구비 배분 시스템의 4가지 시나리오를 정량적으로 시뮬레이션하는 시각화 도구 개발
• 규범적 심사를 통한 경쟁 제거로 인한 효율성과 공정성의 동시 달성 제안

Limitation & Further Study

• GrantInq는 시뮬레이션 기반이므로 실제 구현 시 조직적, 정치적, 문화적 저항 고려 부족
• 제안된 시스템이 모든 학문 분야와 국가의 다양한 펀딩 구조에 동일하게 적용 가능한지 미검증
• 로또 선정 후 제안서 작성 거절률 예측 및 그로 인한 추가 비용 계산 부재
• 규범적 심사의 구체적 기준과 심사자 선정 방식에 대한 상세 가이드라인 부족
• 후속 연구: 실제 펀딩 기관과의 파일럿 프로젝트를 통한 실행 가능성 검증, 다양한 학문 분야별 영향 평가, 심사자 편견 최소화 방안에 대한 심화 연구

Evaluation

총평: 연구비 배분의 만성적 편견 문제에 대해 로또 시스템의 도입 시점을 획기적으로 변경함으로써 근본적 해결을 제안하는 중요한 논평이다. GrantInq를 통한 정량적 시뮬레이션이 정책 변화의 근거를 제시하나, 실제 구현 과정의 현실적 과제에 대한 심화 검토가 필요하다.