Mr. Twister

Вот беда

A megateam of reproducibility-minded scientists is renewing a controversial proposal to raise the standard for statistical significance in research studies. They want researchers to dump the long-standing use of a probability value (p-value) of less than 0.05 as the gold standard for significant results, and replace it with the much stiffer p-value threshold of 0.005.
http://www.sciencemag.org/news/2017/07/it-will-be-much-harder-call-new-findings-significant-if-team-gets-its-way


Cf.: Good statistical practice, as an essential component of good scientific practice, emphasizes principles of good study design and conduct, a variety of numerical and graphical summaries of data, understanding of the phenomenon under study, interpretation of results in context, complete reporting and proper logical and quantitative understanding of what data summaries mean. No single index should substitute for scientific reasoning -- The ASA's Statement on p-Values: Context, Process, and Purpose.
Мы сейчас про науку говорим, или про портфолио менеджмент?
Давно пора. Но ученые на это не пойдут. Ведь это на порядок сократит количество их публикаций.
Да ну. Количество публикаций зависит от количества людей, пытающихся получить тенюр, а не от выбора уровня значимости.
Если данные достаточно долго мучить, можно получить любой порядок значимости.