بحرانِ تکرار نشان میدهد ادبیاتِ چاپشده میتواند نظاممند قابلیتِ اتکا را بیشبرآورد کند، چون انگیزه و انعطافِ تحلیل تعیین میکنند کدام یافته دیده و پایدار میشود.
1مسئلهای که حل میکند
ناتوانی در بازتولیدِ نتایجِ مشهور مسئلهای ساختاری را آشکار کرد، نه فقط خطای فردی. توانِ کم، سوگیریِ انتشار، آزادیِ تحلیل، سنجشِ ضعیف، نمونهٔ کوچک و انگیزهٔ تازگی میتوانند ادبیاتی بسازند که بسیاری از «موفقیتها» در تکرارِ مستقل شکست بخورند. این بحران پیشینِ ما دربارهٔ یافتهٔ منفرد را عوض میکند.
2ایدهٔ اصلی
بخش بزرگی از یافتههای منتشرشده هنگام تکرارِ مستقل شکست میخورند. علتها بیشتر ساختاریاند — انگیزهها، تحلیلِ انعطافپذیر، انتشارِ گزینشی — نه تقلب.
3خاستگاه و زمینه
با پروژههای بزرگِ تکرار در روانشناسی و پزشکی و فراتحقیقِ چهرههایی چون جان یوانیدیس، برایان نوزک، اندرو گلمان و هشدارهای قدیمیترِ پل میل برجسته شد. یک رویدادِ واحد نیست، بلکه خوشهای از مشکلاتِ وثاقت است.
4مثالِ کلاسیک
زیررشتههای کاملی از روانشناسی و پزشکی در تلاشهای نظاممندِ تکرار شکست خوردند، از جمله نتایجی که بهعنوان امرِ قطعی تدریس میشد.
5اعتراضها و پاسخها
اعتراض. شکستِ بازتولید دقیقاً یعنی نتیجهٔ اصلی کاذب نبود؛ زمینه و ناهمگنی مهماند.
پاسخ. درست. باید تکرارِ مستقیم را از تعمیمِ مفهومی جدا کرد و تعدیلِ واقعی ممکن است وجود داشته باشد. اما شکنندگیِ توضیحندادهشده ادعای کلیِ استحکام را ضعیف میکند.
اعتراض. علم خوداصلاح است، پس بحران موفقیتِ علم را نشان میدهد نه شکست را.
پاسخ. هر دو میتوانند درست باشند. کشف و اصلاح خوداصلاحی است؛ مقیاسِ مشکل نشان میدهد اصلاح میتواند کند باشد و نظامِ انتشار پیش از اصلاح بیشاطمینانی تولید کند.
6با اینها اشتباه نگیرید
تکرار و بازتولیدپذیری
بازتولیدپذیری اغلب یعنی گرفتنِ همان نتیجه از همان داده/کد؛ تکرار یعنی آزمونِ ادعا با داده یا مطالعهٔ تازه.
شکستِ تکرار و ابطال
شکست میتواند از نمونه، سنجش، زمینه یا تحلیل باشد و فقط فرضیهٔ substantive را هدف نگیرد. شاهد است، نه الزاماً ابطالِ منطقیِ یکضرب.
7خطاهای رایج
- یکسان مشکوک دانستنِ همهٔ مقالات بهجای وزندهی بر اساسِ طراحی، پیشثبت، اندازهٔ نمونه و تکرارِ مستقل.
- برداشتِ یک شکستِ تکرار بهعنوان اثباتِ تقلب.
8در کارِ شما
احتمالِ پیشینی برای هر نتیجهٔ منتشرشدهٔ منفرد تعیین میکند — از جمله و بهویژه آنهایی که موضعِ شما را تأیید میکنند.
9خودآزمایی
یافتهای شگفتآور p=0.02 دارد اما پیشثبت نشده، توانِ کم و هیچ تکرارِ مستقلی ندارد. بحرانِ تکرار چه اثری بر پیشین شما دارد؟
نمایش پاسخ
باید اعتماد را بهطور معنادار پایینتر از تیتر نگه دارد. نرخِ پایه شامل انتخابِ انتشار و آزادیِ تحلیل است؛ تکرارِ مستقل و پرتوان باید وزنِ بسیار بیشتری بگیرد.