5#

Метод, позволяющий «доказать» что угодно — Джеймс А. Смит. James A. Smith - видеоролик

Изучение английского языка с помощью параллельных субтитров ролика "Метод, позволяющий «доказать» что угодно — Джеймс А. Смит". Метод интервальных повторений для пополнения словарного запаса английских слов. Встроенный словарь. Всего 828 книг и 2809 познавательных видеороликов в бесплатном доступе.

страница 2 из 3  ←предыдущая следующая→ ...

00:02:22
So if a p-value doesnt answer the research question,
Но если p-значение не отвечает на вопрос исследования,
why does the scientific community use it?
почему же учёные постоянно его используют?
Well, because even though a p-value doesnt directly state the probability
Потому что, хотя p-значение и не даёт вероятность того,
that the results are due to random chance,
что результаты исследования случайны,
it usually gives a pretty reliable indication.
оно всё же обычно является достаточно надёжным показателем.
00:02:39
At least, it does when used correctly.
По крайней мере, при правильной интерпретации.
And thats where many researchers, and even whole fields,
А именно с этим у многих учёных, и даже у целых областей науки,
have run into trouble.
возникают трудности.
Most real studies are more complex than the tea experiment.
Большинство настоящих исследований куда сложнее, чем эксперимент с чаем.
Scientists can test their research question in multiple ways,
Учёные используют в исследовании различные подходы,
00:02:54
and some of these tests might produce a statistically significant result,
и некоторые из них показывают статистически значимые результаты,
while others dont.
в то время как другие — нет.
It might seem like a good idea to test every possibility.
Может показаться, что использование разных методов — хорошая идея.
But its not, because with each additional test,
Но это не так, ведь каждое новое испытание
the chance of a false positive increases.
увеличивает шанс получения ложноположительного результата.
00:03:10
Searching for a low p-value, and then presenting only that analysis,
Целенаправленный поиск низкого p-значения с дальнейшим учётом для анализа его одного
is often called p-hacking.
часто называют вылавливанием данных.
Its like throwing darts until you hit a bullseye
Это как бросать дротики пока не попадёте в «яблочко»,
and then saying you only threw the dart that hit the bulls eye.
а потом заявить, что бросили всего один дротик и сразу попали в центр мишени.
This is exactly what the music researchers did.
Именно это и сделали в музыкальном исследовании.
00:03:28
They played three groups of participants each a different song
Участникам в каждой из трёх групп включали разные песни,
and collected lots of information about them.
после чего собирали о них многочисленную информацию.
The analysis they published included only two out of the three groups.
В опубликованных результатах учитывались лишь две группы из трёх.
Of all the information they collected,
Из всей собранной информации
their analysis only used participantsfathersage
использовался только возраст отцов участников,
00:03:44
tocontrol for variation in baseline age across participants.”
так как это позволяло «сократить возрастной разброс».
They also paused their experiment after every ten participants,
Вдобавок после каждого десятого участника проверялось p-значение:
and continued if the p-value was above .05,
если оно было выше 0,05 — эксперимент продолжали,
but stopped when it dipped below .05.
а если ниже — его останавливали.
They found that participants who heard one song were 1.5 years younger
Было обнаружено, что те, кто прослушал одну из песен, были на 1,5 года моложе
00:04:06
than those who heard the other song, with a p-value of .04.
тех, кто прослушал другую песню — с p-значением равным 0,04.
Usually its much tougher to spot p-hacking,
Обычно обнаружить вылавливание данных куда сложнее,
because we dont know the results are impossible:
ведь мы не знаем, какие результаты получить невозможно:
the whole point of doing experiments is to learn something new.
эксперименты проводят как раз для того, чтобы открыть что-то новое.
Fortunately, theres a simple way to make p-values more reliable:
К счастью, есть простой способ повышения надёжности p-значения:
00:04:25
pre-registering a detailed plan for the experiment and analysis
заранее расписать процедуру исследования и анализа
beforehand that others can check,
и сделать этот протокол доступным для проверки,
so researchers cant keep trying different analyses
чтобы учёные не могли прибегать к дополнительным методам
until they find a significant result.
вплоть до получения значимого результата.
скачать в HTML/PDF
share