Benchmarking open-source tools for in silico antiviral drug discovery

Motivation

• Known: 기존 백신 개발은 시간이 오래 걸리며 일부 바이러스(HIV, Hepatitis C 등)는 백신 개발에 극도로 저항적이다. 오픈소스 계산 도구들이 약물 발견에 활용되고 있으나 항바이러스제 발견에 대한 체계적인 벤치마킹이 부재하다.
• Gap: 항바이러스 약물 발견을 위한 고품질 바이러스-리간드 바인딩 데이터셋이 부족하며, 다양한 오픈소스 도구들의 항바이러스 상황에서의 상대적 성능이 미평가 상태이다.
• Why: 팬데믹 상황에서 기존 승인 약물의 신속한 재용도(drug repurposing)와 항바이러스 병용약 설계는 생명을 구할 수 있으며, 이를 위해서는 신뢰할 수 있는 계산 도구와 데이터셋이 필수적이다.
• Approach: BindingDB 등에서 43,005개의 바이러스 단백질-리간드 결합 데이터를 수집·정제(polyprotein 처리 포함)하여 커스텀 데이터셋을 구축하고, 853개의 항바이러스 화합물과 10종 바이러스의 16개 단백질 표적으로 구성된 테스트 셋에서 15개 도구를 평가했다.

Achievement

Fig. 3: Histogram showing the value ranges for different protein-ligand pairs on BindingDb, empha-

• 데이터셋 큐레이션: BindingDB 데이터의 31%가 polyprotein 서열 분할을 필요로 함을 발견하여 ML 모델 학습에 적합한 43,005개 항목 데이터셋 구축
• DrugFormDTA 미세조정: 커스텀 항바이러스 데이터셋으로 미세조정 시 상관계수 r=0.5에서 r=0.7로 성능 향상
• 벤치마킹 결과: ML 기반 방법 중 Boltz-2와 DrugFormDTA가 최고 성능, 도킹 방법 중 GNINA가 최우수 기록, 바이러스 단백질별로 상당한 성능 편차 관찰
• 포괄적 자원 구축: antivirals-database.radvac.org에 승인된 약물 라이브러리 및 임상 중/승인된 항바이러스제 목록 통합

How

Fig. 4: The hierarchy of quantum chemistry methods, with additional classical physics and docking

• BindingDB, ChEMBL, PubChem 등 다중 소스에서 바이러스 단백질-리간드 결합 데이터 수집
• Polyprotein 서열을 개별 단백질로 분할하는 전처리 파이프라인 적용
• DrugFormDTA 모델을 커스텀 항바이러스 데이터셋으로 fine-tuning 수행
• 853개 항바이러스 화합물 × 16개 단백질 표적의 커스텀 테스트 셋에서 15개 오픈소스 도구 정량 평가
• Boltz-2, GNINA, FlowDock, Interformer, AutoDock-GPU 등 ML 기반 및 도킹 기반 도구 성능 비교
• 평가 지표로 상관계수(r) 및 다양한 결합 친화도 예측 메트릭 사용

Originality

• 항바이러스 약물 발견을 위한 대규모 정제 데이터셋(43,005개 항목)의 체계적 구축 및 polyprotein 처리의 중요성 정량화
• 팬데믹 대응용 오픈소스 도구에 대한 첫 종합 벤치마킹 연구로, 기존 일반 약물 발견 도구 평가와 차별화
• DrugFormDTA 미세조정을 통한 항바이러스 특화 성능 향상 입증
• 약물 재용도 및 병용약 설계를 위한 통합 자원(antivirals-database)의 공개

Limitation & Further Study

• 테스트 셋이 853개 화합물로 제한적이며, 일부 바이러스 단백질의 표본 수가 적을 수 있음
• 벤치마킹이 정적 시점의 도구 버전에 한정되며, 향후 모델 업데이트에 따른 재평가 필요
• 도킹 방법의 경우 단백질 구조 품질과 준비 과정의 영향을 충분히 분석하지 않음
• 화학 공간 탐색 전략(similarity search, PAINS filtering 등)의 실제 적용 효과에 대한 검증 부재
• 병용약 시너지 정량화(Appendix B) 방법론의 실제 적용 사례 제시 부족
• 후속연구: 더 큰 테스트 셋 확보, 신약 발견용 생성 모델 통합, 실험 검증, 사용자 친화적 플랫폼 개발 필요

Evaluation

총평: 팬데믹 상황에서의 신속한 항바이러스제 발견이라는 중요한 문제에 대해 체계적인 데이터셋 구축과 포괄적인 벤치마킹을 제공하는 가치 있는 연구이며, 공개 자원과 명확한 발견(Boltz-2, DrugFormDTA 우수성)이 실제 임상 응용 가능성을 높인다.