Метод, позволяющий «доказать» что угодно — Джеймс А. Смит. James A. Smith - видеоролик
Изучайте английский язык с помощью параллельных субтитров ролика "Метод, позволяющий «доказать» что угодно — Джеймс А. Смит".
Метод интервальных повторений для пополнения словарного запаса английских слов. Встроенный словарь.
Всего 827 книг и 2706 познавательных видеороликов в бесплатном доступе.
страница 2 из 3 ←предыдущая следующая→ ...
00:02:22
So if a p-value doesn’t answer
the research question,
Но если p-значение
не отвечает на вопрос исследования,
why does the scientific community use it?
почему же учёные постоянно его используют?
Well, because even though a p-value
doesn’t directly state the probability
Потому что, хотя p-значение
и не даёт вероятность того,
that the results are due to random chance,
что результаты исследования случайны,
it usually gives a pretty
reliable indication.
оно всё же обычно является
достаточно надёжным показателем.
00:02:39
At least, it does when used correctly.
По крайней мере,
при правильной интерпретации.
And that’s where many researchers,
and even whole fields,
А именно с этим у многих учёных,
и даже у целых областей науки,
have run into trouble.
возникают трудности.
Most real studies are more complex
than the tea experiment.
Большинство настоящих исследований
куда сложнее, чем эксперимент с чаем.
Scientists can test their research
question in multiple ways,
Учёные используют в исследовании
различные подходы,
00:02:54
and some of these tests might produce
a statistically significant result,
и некоторые из них показывают
статистически значимые результаты,
while others don’t.
в то время как другие — нет.
It might seem like a good idea
to test every possibility.
Может показаться, что использование
разных методов — хорошая идея.
But it’s not,
because with each additional test,
Но это не так, ведь каждое новое испытание
the chance of a false positive increases.
увеличивает шанс получения
ложноположительного результата.
00:03:10
Searching for a low p-value,
and then presenting only that analysis,
Целенаправленный поиск низкого p-значения
с дальнейшим учётом для анализа его одного
is often called p-hacking.
часто называют вылавливанием данных.
It’s like throwing darts
until you hit a bullseye
Это как бросать дротики
пока не попадёте в «яблочко»,
and then saying you only threw the dart
that hit the bull’s eye.
а потом заявить, что бросили всего один
дротик и сразу попали в центр мишени.
This is exactly what the
music researchers did.
Именно это и сделали
в музыкальном исследовании.
00:03:28
They played three groups of participants
each a different song
Участникам в каждой из трёх групп
включали разные песни,
and collected lots of information
about them.
после чего собирали о них
многочисленную информацию.
The analysis they published included only
two out of the three groups.
В опубликованных результатах
учитывались лишь две группы из трёх.
Of all the information they collected,
Из всей собранной информации
their analysis only used
participants’ fathers’ age—
использовался только
возраст отцов участников,
00:03:44
to “control for variation in baseline
age across participants.”
так как это позволяло
«сократить возрастной разброс».
They also paused their experiment
after every ten participants,
Вдобавок после каждого десятого участника
проверялось p-значение:
and continued if the p-value
was above .05,
если оно было выше 0,05 —
эксперимент продолжали,
but stopped when it dipped
below .05.
а если ниже — его останавливали.
They found that participants who heard
one song were 1.5 years younger
Было обнаружено, что те, кто прослушал
одну из песен, были на 1,5 года моложе
00:04:06
than those who heard the other song,
with a p-value of .04.
тех, кто прослушал другую песню —
с p-значением равным 0,04.
Usually it’s much tougher to spot
p-hacking,
Обычно обнаружить вылавливание
данных куда сложнее,
because we don’t know the results
are impossible:
ведь мы не знаем, какие результаты
получить невозможно:
the whole point of doing experiments
is to learn something new.
эксперименты проводят как раз
для того, чтобы открыть что-то новое.
Fortunately, there’s a simple way
to make p-values more reliable:
К счастью, есть простой способ
повышения надёжности p-значения:
00:04:25
pre-registering a detailed plan
for the experiment and analysis
заранее расписать процедуру
исследования и анализа
beforehand that others can check,
и сделать этот протокол
доступным для проверки,
so researchers can’t keep trying
different analyses
чтобы учёные не могли прибегать
к дополнительным методам
until they find a significant result.
вплоть до получения значимого результата.