Essence
본 논문은 LLM(Large Language Models)을 이용한 학술지 논문 심사를 개선하기 위해, 인간 전문가의 심사 과정을 모방하는 다단계 구조화된 프레임워크 DeepReview를 제안한다. DeepReview-13K 데이터셋으로 훈련된 DeepReviewer-14B 모델은 기존 모델들(CycleReviewer-70B, GPT-o1, DeepSeek-R1)을 능가하면서도 더 적은 토큰을 사용한다.
Evaluation
Novelty: 4.5/5 Technical Soundness: 4/5 Significance: 4.5/5 Clarity: 4/5 Overall: 4.2/5
총평: DeepReview는 LLM 기반 논문 심사 시스템의 신뢰성과 효율성을 크게 향상시키는 구조화된 접근법을 제시하며, 대규모 공개 데이터셋과 모델을 통해 학술 커뮤니티에 즉시적 기여를 한다. 다만 다양한 학문 분야로의 일반화, 인간-AI 협력 효과의 실증적 검증, 기술적 세부 사항의 더욱 충실한 설명이 후속 과제로 남아있다.
같이 보면 좋은 논문
기반 연구전체 길이 문서 생성 기법을 다른 도메인으로 확장한 연구이다.
기반 연구피어리뷰 데이터셋을 확장하여 자동 평가 시스템을 구축한 연구이다.
기반 연구LLM을 활용해 리뷰어 간 불일치를 탐지하는 실제 응용 사례이다.
기반 연구생성된 리뷰의 품질 평가에 실제로 적용 가능한 지표를 제공한다.
기반 연구철회 논문 분석에 LLM 기법을 적용한 연구이다.
기반 연구LLM 논문 리뷰 품질 평가 연구를 세부 항목별로 확장한 연구이다.
기반 연구인간 유사 추론 과정을 모방하는 다단계 프레임워크의 기초를 제공한다.
다른 접근AI 논문 심사 자동화를 다른 다중 에이전트 구조로 접근한다.
기반 연구메모리 기반 문헌 검색 기법을 확장한 연구이다.
기반 연구LLM 기반 과학 검증을 실제 논문 오류 탐지에 적용한 연구이다.
기반 연구LLM 기반 논문 심사 자동화 프레임워크는 대상 논문이 분석하는 AI Scientist의 검증 및 반박 능력 단계와 직접 연관된 응용 사례이다.
다른 접근동료 검토에서 AI 성능 평가라는 동일 주제를 다른 방법으로 접근한다.
다른 접근LLM 기반 리뷰 생성이라는 동일 문제에 대한 다른 접근을 제시한다.
다른 접근프롬프트 기반 리뷰 생성 개선이라는 방법론적 공통점이 있다.
다른 접근AI 생성 논문 품질 평가를 위한 다른 지표 및 방법론을 제안한다.
응용 사례구조화된 심사 프레임워크를 실제 학술 논문 평가에 적용한다.
다른 접근LLM 시대 동료 심사 관련 자원 활용을 다루는 유사 주제의 연구이다.
다른 접근자체 개선 루프를 갖춘 AI 리뷰어 설계라는 유사한 접근법을 공유한다.
다른 접근LLM을 활용한 논문의 비판적 오류 검출이라는 동일한 문제를 다루는 연구이다.
다른 접근peer review 데이터셋 구축을 위한 다른 접근을 제시한다.
후속 연구인간 유사 심사 과정 모방 프레임워크를 확장한다.
다른 접근LLM 기반 논문 심사를 위한 다른 구조적 접근법을 제안한다.
후속 연구SPECTER2 유사도 0.96로 Biomedical AI Knowledge Systems와 AI-Assisted Academic Scholarly Communication가 맞닿아, 'DeepReview: Improving LLM-based Paper Review with Human-like Deep Thinking Process'가 이 ICML 2026 논문의 배경·대안·응용 맥락을 보완한다.
후속 연구학술 논문 텍스트 처리 관련 기초 연구로서 데이터셋 구축의 이론적 배경을 제공한다.
후속 연구학술 텍스트 품질 개선 연구의 기초를 제공함
후속 연구SPECTER2 유사도 0.94로 Biomedical AI Knowledge Systems와 AI-Assisted Academic Scholarly Communication가 맞닿아, 'DeepReview: Improving LLM-based Paper Review with Human-like Deep Thinking Process'가 이 ICML 2026 논문의 배경·대안·응용 맥락을 보완한다.
후속 연구SPECTER2 유사도 0.94로 Biomedical AI Knowledge Systems와 AI-Assisted Academic Scholarly Communication가 맞닿아, 'DeepReview: Improving LLM-based Paper Review with Human-like Deep Thinking Process'가 이 ICML 2026 논문의 배경·대안·응용 맥락을 보완한다.
후속 연구심사 데이터셋을 확장하여 DeepReview의 학습 성능을 향상시킨다.
후속 연구SPECTER2 유사도 0.94로 Biomedical AI Knowledge Systems와 AI-Assisted Academic Scholarly Communication가 맞닿아, 'DeepReview: Improving LLM-based Paper Review with Human-like Deep Thinking Process'가 이 ICML 2026 논문의 배경·대안·응용 맥락을 보완한다.
후속 연구SPECTER2 유사도 0.95로 Biomedical AI Knowledge Systems와 AI-Assisted Academic Scholarly Communication가 맞닿아, 'DeepReview: Improving LLM-based Paper Review with Human-like Deep Thinking Process'가 이 ICML 2026 논문의 배경·대안·응용 맥락을 보완한다.
반론/비판LLM 활용의 위험성에 대한 비판적 관점을 공유함