Estimating the Reproducibility of Psychological Science

์ €์ž: Open Science Collaboration | ๋‚ ์งœ: 2015 | DOI: 10.1126/science.aac4716 📄 PDF


Essence

์ด ์—ฐ๊ตฌ๋Š” ์‹ฌ๋ฆฌํ•™์˜ ์žฌํ˜„์„ฑ ์œ„๊ธฐ๋ฅผ ์ฒด๊ณ„์ ์œผ๋กœ ๊ฒ€์ฆํ•˜๊ธฐ ์œ„ํ•ด 100๊ฐœ์˜ ์‹ฌ๋ฆฌํ•™ ๋…ผ๋ฌธ์„ ์ง์ ‘ ๋ณต์ œ ์‹คํ—˜ํ•˜์—ฌ, ์›๋ž˜ ๋…ผ๋ฌธ์˜ ํšจ๊ณผ ํฌ๊ธฐ(M=.396)๊ฐ€ ๋ณต์ œ ๊ฒฐ๊ณผ(M=.198)์˜ ์•ฝ 2๋ฐฐ๋ผ๋Š” ๊ฒƒ์„ ๋ฐœ๊ฒฌํ–ˆ๋‹ค. ์‹ฌ๋ฆฌํ•™ ์—ฐ๊ตฌ์˜ ์ƒ๋‹น ๋ถ€๋ถ„์ด ์žฌํ˜„๋˜์ง€ ์•Š์Œ์„ ๋Œ€๊ทœ๋ชจ ํ˜‘๋ ฅ ํ”„๋กœ์ ํŠธ๋กœ ๊ฒฝํ—˜์ ์œผ๋กœ ์ž…์ฆํ•œ ์ค‘์š”ํ•œ ์ฆ๊ฑฐ๋ฅผ ์ œ์‹œํ•œ๋‹ค.

Motivation

Achievement

How

Originality

Limitation & Further Study

Evaluation

Novelty: 5/5 Technical Soundness: 4/5 Significance: 5/5 Clarity: 5/5 Overall: 5/5

์ดํ‰: ์ด ๋…ผ๋ฌธ์€ ์‹ฌ๋ฆฌํ•™์˜ ์žฌํ˜„์„ฑ ์œ„๊ธฐ๋ฅผ ๋Œ€๊ทœ๋ชจ ํ˜‘๋ ฅ ํ”„๋กœ์ ํŠธ๋กœ ์ตœ์ดˆ ๊ฒ€์ฆํ•˜์—ฌ, ๊ณผํ•™ ๊ณต๋™์ฒด์— ๊ทผ๋ณธ์ ์ธ ์‹ ๋ขฐ์„ฑ ๋ฌธ์ œ๋ฅผ ์ œ์‹œํ•œ ์˜ํ–ฅ๋ ฅ ์žˆ๋Š” ์—ฐ๊ตฌ๋‹ค. ์ฒด๊ณ„์ ์ธ ๋ฐฉ๋ฒ•๋ก , ํˆฌ๋ช…ํ•œ ๊ณต๊ฐœ ๋ฐ์ดํ„ฐ, ๊ทธ๋ฆฌ๊ณ  ํ•™๋ฌธ์— ๋ฏธ์นœ ํŒŒ๊ธ‰ ํšจ๊ณผ๋ฅผ ๊ณ ๋ คํ•  ๋•Œ ๊ณผํ•™ ๋ฉ”ํƒ€-๊ณผํ•™์˜ ์ˆ˜์ž‘ ์ค‘ ํ•˜๋‚˜๋กœ ํ‰๊ฐ€๋œ๋‹ค.

๊ฐ™์ด ๋ณด๋ฉด ์ข‹์€ ๋…ผ๋ฌธ

๊ธฐ๋ฐ˜ ์—ฐ๊ตฌ
์ƒ์˜ํ•™ ๋…ผ๋ฌธ ์ฒ ํšŒ์™€ ๊ณผํ•™์  ๋ถ€์ •ํ–‰์œ„ ๋ถ„์„์˜ ๋ฐฉ๋ฒ•๋ก ์  ๊ธฐ์ดˆ๋ฅผ ์ œ๊ณตํ•œ๋‹ค.
๊ธฐ๋ฐ˜ ์—ฐ๊ตฌ
๊ณผํ•™๊ณ„ ์žฌํ˜„์„ฑ ์œ„๊ธฐ์˜ ํ˜„์‹ค์  ๋ฐฐ๊ฒฝ๊ณผ ์‹ค์ œ ์—ฐ๊ตฌ์ž๋“ค์˜ ์ธ์‹์กฐ์‚ฌ๋ฅผ ํ•จ๊ป˜ ์ฝ์œผ๋ฉด ์žฌํ˜„์„ฑ ์œ„๊ธฐ๋ฅผ ๋” ์ž…์ฒด์ ์œผ๋กœ ์ดํ•ดํ•  ์ˆ˜ ์žˆ๋‹ค.
๊ธฐ๋ฐ˜ ์—ฐ๊ตฌ
๊ณผํ•™์  ์žฌํ˜„ ๊ฐ€๋Šฅ์„ฑ ์œ„๊ธฐ์™€ ์ถœํŒ ํŽธํ–ฅ ํ˜„์ƒ์„ ๋ฉ”ํƒ€๋ถ„์„ํ•˜๋Š” ๊ธฐ์ดˆ ๋ฐ์ดํ„ฐ ๋ฐ ํ•ด์„์  ๊ธฐ๋ฐ˜์„ ์ œ๊ณตํ•œ๋‹ค.
๊ธฐ๋ฐ˜ ์—ฐ๊ตฌ
๊ณผํ•™ ์—ฐ๊ตฌ์˜ ์žฌํ˜„์„ฑ ์ธก์ • ๋ฐฉ๋ฒ•๋ก ์˜ ๊ธฐ๋ฐ˜์„ ์ œ๊ณตํ•จ
๋‹ค๋ฅธ ์ ‘๊ทผ
์ถœํŒ ํŽธํ–ฅ๊ณผ ์—ฐ๊ตฌ ๊ฒฐ๊ณผ์˜ ์‹ ๋ขฐ์„ฑ ๋ฌธ์ œ๋ฅผ ๋‹ค๋ฅธ ์ธก๋ฉด์—์„œ ๋ถ„์„ํ•œ๋‹ค.
๋‹ค๋ฅธ ์ ‘๊ทผ
์‚ฌํšŒ๊ณผํ•™ ๋ถ„์•ผ์˜ ์žฌํ˜„์„ฑ ์œ„๊ธฐ๋ฅผ ๋‹ค๋ฅธ ํ•™๋ฌธ ๋ถ„์•ผ ๋ฐ ๋ฐฉ๋ฒ•๋ก ์œผ๋กœ ๊ฒ€ํ† ํ•จ
๋‹ค๋ฅธ ์ ‘๊ทผ
๊ณผํ•™ ์—ฐ๊ตฌ์˜ ์žฌํ˜„์„ฑ ์œ„๊ธฐ๋ฅผ ๋‹ค๋ฅธ ๊ด€์ ์—์„œ ๋‹ค๋ฃจ๋ฉฐ ๋ฐฉ๋ฒ•๋ก ์  ๊ฐœ์„  ๋ฐฉํ–ฅ์„ ์ œ์‹œํ•œ๋‹ค.
๋‹ค๋ฅธ ์ ‘๊ทผ
๊ณผํ•™ ์ถœํŒ ๋ฐ ํ‰๊ฐ€ ์‹œ์Šคํ…œ์˜ ๋ฉ”์ปค๋‹ˆ์ฆ˜์„ ์ฒด๊ณ„์ ์œผ๋กœ ๋ถ„์„ํ•œ ์œ ์‚ฌํ•œ ์—ฐ๊ตฌ์ด๋‹ค.
๋‹ค๋ฅธ ์ ‘๊ทผ
๊ณผํ•™์  ํ˜‘์—…์˜ ์žฅ๋ฒฝ๊ณผ ์ด‰์ง„ ์š”์ธ์„ ๋‹ค๋ฃจ๋Š” ์œ ์‚ฌํ•œ ๊ด€์ ์˜ ์—ฐ๊ตฌ์ด๋‹ค.
๋‹ค๋ฅธ ์ ‘๊ทผ
๊ณผํ•™์  ํ˜‘๋ ฅ ํŒจํ„ด ๋ฐ ํ•™์ œ ๊ฐ„ ์—ฐ๊ตฌ์— ๊ด€ํ•œ ์œ ์‚ฌํ•œ ์ฃผ์ œ์˜ ์—ฐ๊ตฌ์ด๋‹ค.
๋‹ค๋ฅธ ์ ‘๊ทผ
๊ณผํ•™ ์—ฐ๊ตฌ์˜ ์‹ ๋ขฐ์„ฑ๊ณผ ์žฌํ˜„ ๊ฐ€๋Šฅ์„ฑ์„ ๋‹ค๋ฅธ ๊ด€์ ์—์„œ ํ‰๊ฐ€ํ•จ
ํ›„์† ์—ฐ๊ตฌ
958๋ฒˆ ๋…ผ๋ฌธ์€ ์‹ฌ๋ฆฌ๊ณผํ•™ ๋ถ„์•ผ์˜ ๋Œ€๊ทœ๋ชจ ์žฌํ˜„์„ฑ ํ…Œ์ŠคํŠธ๋ฅผ ์‹ค์‹œํ•ด, 925๋ฒˆ์˜ ๊ณผํ•™ ์ „์ฒด์˜ ์žฌํ˜„์„ฑ ์œ„๊ธฐ ์„ค๋ฌธ์กฐ์‚ฌ์™€ ๋ฐ์ดํ„ฐ์ ์œผ๋กœ ์—ฐ๊ฒฐ๋œ๋‹ค.
ํ›„์† ์—ฐ๊ตฌ
๊ณผํ•™ ์žฌํ˜„์„ฑ ๋ฌธ์ œ์˜ ์›์ธ๊ณผ ํ•ด๊ฒฐ์ฑ…์„ ์ถ”๊ฐ€๋กœ ๋ถ„์„ํ•จ
← ๋ชฉ๋ก์œผ๋กœ ๋Œ์•„๊ฐ€๊ธฐ

๐ŸŽง Audio Overview

์ด ๋…ผ๋ฌธ ๋ฆฌ๋ทฐ๋ฅผ ํŒŸ์บ์ŠคํŠธํ˜• ์˜ค๋””์˜ค๋กœ ์ƒ์„ฑํ•ฉ๋‹ˆ๋‹ค. (Gemini ยท ํ‚ค๋Š” ๋ธŒ๋ผ์šฐ์ €์—๋งŒ ์ €์žฅ ยท ์™„์„ฑ๋ณธ์€ ์ด๋ฉ”์ผ๋กœ๋„ ์ „์†ก)
โ–ธ ๊ณ ๊ธ‰: ๊ตฌ์„ฑ ๋ฐฉํ–ฅ(๋Œ€๋ณธ ์ž‘์„ฑ ์ง€์นจ) ์ง์ ‘ ์ˆ˜์ •