Apodokimos: A Decentralized Epistemic Contribution Graph for Scientific Claim Evaluation (wp-v0.1)

Motivation

• Known: Journal Impact Factor는 1955년 도서관 수서 관리용으로 설계되었으나 현재 연구 평가의 주요 지표로 오용되고 있으며, 기존의 h-index, CiteScore, altmetrics 등의 대안들도 논문 중심의 기본 온톨로지를 유지하고 있다.
• Gap: 기존 평가 지표들은 인용 속도(citation velocity)를 측정할 뿐 재현성, 위증 저항성(falsification resistance), 실제 영향(real-world consequence)을 반영하지 못하며, 선언적 개혁(DORA 등)은 근본적인 인센티브 구조 변화를 만들지 못했다.
• Why: 현재 평가 시스템은 과학의 원자 단위를 잘못 정의하고 있으며, 이로 인해 재현성 위기, 출판 편향, 인센티브 왜곡 등이 발생하고 있어 과학적 진실성보다 출판 가능성을 우선시하는 구조적 문제를 해결해야 한다.
• Approach: 검증 가능한 클레임(falsifiable claim)을 원자 단위로 하는 방향성 비순환 그래프(DAG) 기반 프로토콜을 설계하고, Substrate 파라체인에 불변적 증명(attestation)을 등록하며, Soulbound Token(SBT)을 통해 평판을 identity-bound로 인코딩한다.

Achievement

• 온톨로지적 전환: 논문에서 검증 가능한 클레임으로 원자 단위를 변경하여 과학적 주장의 생명 주기를 직접 추적
• 다층 가중치 함수: Replication Score R(c,t), Dependency Depth D(c), Survival Rate S(c), Real-world Outcome Linkage O(c)의 4가지 요소로 W(c,t) = R(c,t) × D(c) × S(c) × O(c)를 정의하여 재현성과 영향도를 동시에 평가
• 분야별 시간 감쇠: w_decay(Δt, λ_field) = e^(-λ × Δt)를 통해 2년 고정 IF 윈도우 대신 필드별 지식 순환 속도에 맞춘 연속적 감쇠 적용
• Null Result의 동등 취급: Null Result를 1급 클레임 타입으로 정의하여 출판 편향 문제 구조적 해결
• Typed Attestation: Supports, Contradicts, Replicates, Refutes, Mentions 등으로 구분하여 인용의 성질을 명시적으로 기록
• 탈중앙화 거버넌스: AGPL-3.0 라이선스와 기관 소유 불가 조항으로 상업적 포획 구조적 차단
• Soulbound Token 기반 평판: 전송 불가능한 SBT로 거버넌스 가중치를 자본 기반에서 정체성 기반으로 전환

How

• DAG 구조로 클레임 간 의존성을 명시적으로 모델링하되 순환 의존성 배제
• 각 필드의 스키마(예: 임상의학의 PICO 구조)를 통해 클레임 입자성(granularity) 제어
• Arweave에 클레임 콘텐츠를 영구 저장하고 blake3 해시를 온체인에 앵커
• Substrate 파라체인에 모든 증명 트랜잭션 불변 등록
• 필드별 λ_field 파라미터로 지식 순환 속도에 맞춘 감쇠 함수 적용
• TrialRegistry, SystematicReviewProtocol, PolicyDocument 등 오라클 소스를 통해 O(c) 계산
• 필드별 평균 W̄_field(t)로 정규화하여 크로스필드 비교 가능하게 함
• 클레임 철회 시 S = 0으로 설정하고 페널티를 의존 클레임으로 전파

Originality

• 논문 중심에서 클레임 중심으로의 원자 단위 전환은 선언적 개혁(DORA, Leiden Manifesto) 대비 근본적인 구조 변화
• R(c,t) × D(c) × S(c) × O(c) 승법 결합은 기존 메트릭의 단순 합산 또는 선형 가중치와 구별되는 상호작용 모델
• 필드별 시간 감쇠 함수는 IF의 고정 2년 윈도우를 동적 연속 모델로 대체
• Null Result를 1급 시민으로 승격시켜 출판 편향을 구조적으로 해결
• Dependency Depth D(c)는 citation count와 독립적인 구조적 중요성 메트릭으로, 세미널 이론 결과의 낮은 인용도 문제 해결
• SBT 기반 평판은 증명 활동 참여도를 자본이 아닌 정체성에 바인딩하여 거버넌스 민주화
• 탈중앙화 + AGPL-3.0 라이선스 조합으로 상업적 포획 구조적 차단(Scite 사례 회피)

Limitation & Further Study

• 클레임 입자성 결정의 어려움: PICO 스키마가 임상의학에서 작동하더라도 이론물리학, 수학 등 타 분야에서 canonical template 정의 불명확
• 오라클 의존성: O(c) 계산이 TrialRegistry, PROSPERO 등 기존 인프라에 의존하므로 이들 시스템의 품질과 업데이트 속도에 제약
• Attestation 참여 인센티브 부재: 검증 활동이 SBT로만 보상되는데, 실제 채택 초기 단계에서 참여 동기 확보 메커니즘 미상세
• 감마 필드 파라미터 보정: λ_field를 초기에 어떻게 결정할 것인지, 지식 순환 속도 변화에 대응할 갱신 프로세스 미기술
• Dependency Depth 게이밍: D(c)를 최대화하기 위해 불필요한 의존성 추가하는 조작 가능성
• 크로스필드 비교의 정당성: W_norm(c,t,field) = W(c,t) / μ_field(t)로 정규화하더라도 필드별 측정 단위 차이가 근본적으로 해결되지 않을 가능성
• Retraction 페널티 전파의 과도성: 철회된 클레임에 의존하는 모든 다운스트림 클레임의 가중치 감소 규칙이 지나칠 수 있음
• 대규모 채택 시뮬레이션 부재: 프로토콜이 draft 버전이며, 수천 개 이상 클레임과 증명 규모에서의 계산 복잡도, DAG 유지 비용, 블록체인 확장성 검증 미실시

Evaluation

총평: 본 논문은 Journal Impact Factor의 근본적 문제를 명확히 진단하고, 클레임 단위의 검증 가능한 과학 평가 프로토콜이라는 혁신적 대안을 제시한다. 수식화된 4-요소 가중치 함수, 필드별 시간 감쇠, Soulbound Token 기반 거버넌스 등은 높은 독창성을 보이나, 클레임 입자성 결정, 오라클 의존성, 대규모 채택 시뮬레이션 부재 등이 한계이며, 임상의학을 부트스트랩 도메인으로 선정한 전략은 실질성을 높인다.