Привет, коллеги!
Давненько мы не вспоминали про невоспроизводимость результатов исследований. В прошлый раз говорили про возможные источники и пытались воспроизвести результаты статьи в Nature. А сегодня поговорим о том, что можно сделать, чтобы результаты ваших экспериментов мог повторить любой человек.
🔴Использование повторностей и независимых экспериментов. Чем чаще вы сами пробуете повторить эксперимент с аналогичными реактивами или силами других людей, тем с большей вероятностью его повторит кто угодно и где угодно. Лично я старалась, чтобы мои эксперименты кто-то так или иначе проводил ещё раз, чаще всего студенты.
🔴Стандартизация протоколов. Иногда берёшь чужой протокол и оказывается, что "инкубировать 10 минут" - это где-то между 5 и 25 в зависимости от фазы луны, а состав "буфера PSPS" знает только один человек, да и тот уволился. Поэтому нужно уделять много внимания записи протоколов. Лучше всего записывать каталожные номера и производителей реактивов и оборудования, упоминать разные частности вроде "держать пробирку под углом 45 градусов" и записывать и концентрации, и рекомендуемые объемы. Здорово, если есть возможность снимать видео и хранить где-то – либо будущие поколения, либо вы сами из будущего скажете спасибо.
🔴Поверка и калибровка приборов. А вы знаете, что у нас есть целый Федеральный закон № 102-ФЗ «Об обеспечении единства измерений»? И ещё куча подзаконных актов и регламентов, которые в исследовательской лаборатории, к сожалению, соблюдаются редко. Например, обычные автоматические пипетки надо поверять раз в год. Если такая процедура не проводится (хотя бы самостоятельно сотрудниками лаборатории), то, возможно, ваши протоколы или результаты вовсе не те, что вы думаете.
🔴Контрольные образцы. Очень удобно иметь под рукой какие-то стандартные образцы, на которых всё работает. Иногда такие поставляют вместе с реактивами, но мы предпочитали иметь свои, более близкие к работе. Например, у нас были специальные срезы, на которых мы проверяли, не сдохли ли антитела. Были образцы ДНК для проверки протоколов выделения или ПЦР. Линии клеток для проверки клеточных реактивов. Это полезно, чтобы найти проблему, если вдруг эксперимент не воспроизвёлся: в чём она, в условиях или в образцах?
🔴Хранение сырых данных и этапов обработки. Мы немного касались упорядочивания данных на компе и в лабжурнале. В целом, нужно организовать свою систему хранения так, чтобы другой человек мог проследить весь путь от сырых данных к финальной картинке. А то вдруг ошибка закралась именно там, и эксперимент на самом деле воспроизводится, но не так, как вы посчитали в первый раз. Имела я опыт работы с чужими данными, удовольствие оказалось весьма сомнительным, особенно, когда часть информации была записана на китайском. Вспоминается вот этот старый клип.
➖➖
Кстати, в опросе про воспроизводимость я проголосовала "да" оба раза, историю с тем, как у меня не получалось повторить свой же протокол, писала здесь. Коллеги, а что вы делаете, чтобы быть уверенными, что получаете реальный результат, который будет воспроизводиться, а не какой-то случайный артефакт одного эксперимента?