Expansion of the AmeliCA Observatory on research evaluation policies. User Manual.

Motivation

• Known: 학술 평가는 국가, 국제, 기관 수준에서 다양한 방식으로 이루어지고 있다. 오픈 사이언스와 학술 출판 정책의 중요성이 증대되고 있다.
• Gap: 라틴아메리카 지역의 학술 평가 정책에 대한 통합적이고 접근 가능한 정보 플랫폼이 부족했다. 다양한 국가와 기관의 평가 정책을 체계적으로 비교·분석할 수 있는 도구가 필요했다.
• Why: 공정하고 효과적인 학술 평가 체계를 구축하기 위해서는 각 국가와 기관의 평가 정책을 명확히 이해하고 비교할 필요가 있다. 이는 학술 생태계의 투명성과 신뢰성을 향상시키는 데 필수적이다.
• Approach: AmeliCA가 주도하는 Policy Observatory 플랫폼을 구축하여 드롭다운 메뉴와 인터랙티브 지도를 통한 직관적인 네비게이션을 제공한다. 국가, 기관, 국제 수준에서 선택 가능한 다층적 분석 구조를 제공한다.

Achievement

• 통합 플랫폼 개발: Open Science, Research, Documents, Journals 네 가지 섹션에서 국가·기관 수준의 학술 평가 데이터를 통합적으로 제공
• 다중 접근 방식: 드롭다운 메뉴와 인터랙티브 세계 지도를 통한 국가 선택, 기관 선택 기능 제공
• 국제 비교 분석: International 옵션을 통해 국가 간 학술 평가 정책 비교 가능
• guatemaldo 추가: 플랫폼 확장으로 Guatemala를 포함한 추가 국가 지원
• 다층 분석 구조: 국가 수준(national)과 기관 수준(institutional) 데이터를 구분하여 제시

How

• 드롭다운 메뉴에서 국가를 선택하거나 인터랙티브 지도에서 지리적으로 선택
• 기관 드롭다운 메뉴에서 특정 기관 선택
• International 옵션 선택으로 국제 수준의 비교 분석 수행
• Open Science, Research, Documents, Journals 섹션을 통해 다양한 평가 차원의 데이터 조회
• 국가 수준과 기관 수준 두 가지 분석 레벨에서 결과 확인

Originality

• 라틴아메리카 지역에 특화된 학술 평가 정책 모니터링 플랫폼의 개발
• 국가-기관 이중 수준의 분석 구조로 정책 비교를 계층화
• 인터랙티브 지도와 드롭다운 메뉴 결합으로 직관적 네비게이션 제공
• AmeliCA 주도의 협력을 통한 지역 학술 생태계 투명화 시도

Limitation & Further Study

• 사용자 매뉴얼로서 플랫폼의 기술적 구현 세부사항이 부족함
• 데이터 수집, 분석 방법론에 대한 상세한 설명 부재
• 각 국가별 정책 데이터의 신뢰성 및 최신성 검증 기준 미제시
• 플랫폼이 실제로 학술 평가 정책 개선에 미친 영향에 대한 평가 필요
• 후속 연구: 플랫폼 사용자의 만족도 조사 및 의사결정 영향도 분석
• 후속 연구: 지역 확대(아프리카, 아시아 등)를 통한 글로벌 비교 분석 가능성

Evaluation

총평: 이 매뉴얼은 학술 평가 정책 모니터링을 위한 실용적이고 사용자 친화적인 플랫폼을 제시하며, 라틴아메리카 지역의 학술 투명성 향상에 기여할 수 있다. 다만 기술적 깊이와 실증적 영향 평가가 보완되면 더욱 강력한 자원이 될 것이다.