Обманутый статистической значимостью

Не позволяй поэтам лгать тебе

Посмотрите самую короткую в мире лекцию о #статистика и все, что не так с тем, как люди подходят к этому:

42.

Или скорее: p= 0.042

Вопреки распространенному мнению, термин «статистически значимый» не означает, что что-то важную, важныйили убедительный имело место. Если вы думаете, что мы используем слово значительный Здесь, таким образом, что ваш тезаурус мог бы гордиться, вы становитесь жертвой хитрой ловкости рук. Не позволяйте поэтам лгать вам.

«Не позволяйте поэтам лгать вам». — Бьорк

Для тех, кто предпочитает оставаться в курсе статистический Подробности до минимума: вот все, что вам нужно знать об этом термине статистически значимый:

• Это не значит, что произошло что-то существенное.
• Это не означает, что результаты «большие» или заслуживающие внимания.
• Это не значит, что вы найдете данным интересно.
• Это означает, что кто-то утверждает, что он чем-то удивлен.
• Это не скажет вам ничего полезного, если вы мало что знаете о кто-то и удалось обсуждаемый.

Для всех, кроме лица, принимающего решения, статистически значимые результаты редко бывают известны. значительный в смысле "важную» — они иногда отлично подходит для поднятия интересных вопросов, но часто они не имеют значения.

Будьте очень внимательны, когда неспециалисты используют этот термин, особенно когда он сопровождается затаившим дыхание энтузиазмом. Иногда особенно нахально шарлатаны сделайте еще один шаг вперед и отбросьте немного «статистики», используя всю мощь поэзии. "Эй смотри," они говорят вам, «То, о чем мы говорим, ЗНАЧИТЕЛЬНО в глазах Вселенной».

Нет, это не так.

Худшие нарушители — это те, кто произносит слово «статистически значимое», как будто это синоним слова «статистически значимое».определенный, либоопределенный, либобезупречные знания— здесь теряется некоторая ирония. Этот термин пришел из области, которая касается неопределенность и, таким образом, (по определению!) принадлежит только тем местам, где наши знания не безупречный.

Для тех, кто предпочитает бороться с жаргоном с помощью жаргона, в следующем разделе я помогу себе более формальным языком. Не стесняйтесь отказаться от этого, но если вам одновременно интересно и новенький здесь, возьми небольшой обход чтобы просмотреть все самые важные идеи в статистике всего за 8 минут:

Большинство ссылок в моих статьях ведут на сообщения в блоге, где я дал вам более глубокий обзор выделенных тем, поэтому вы также можете использовать эту статью в качестве стартовой площадки для «Выбери свое собственное приключение». мини-курс on наука о данных.

«Статистическая значимость» просто означает, что р-значение* было достаточно низким, чтобы изменить мнение лица, принимающего решения. Другими словами, это термин, который мы используем, чтобы указать, что нулевая гипотеза законопроект отклонены.** Что законопроект нулевая гипотеза, однако? И насколько строгим было испытание? ¯_(ツ)_/¯

Добро пожаловать в статистику, где Ответ p = 0.042, но вы не знаете, в чем был вопрос.

Технически, лица, принимающие решения тот, кто устанавливает условия проверки гипотезы, является только человек, для которого результаты этого теста могут быть статистически значимыми.

Статистика дает вам набор инструментов для принятия решений, но то, как вы их используете, зависит от вас — это будет так же индивидуально, как и любое другое решение.

Этот процесс включает в себя очень тщательную формулировку вопроса для принятия решения, выбор предположения с которыми вы готовы жить, делая некоторые компромиссы с риском относительно различных вариантов того, почему ваш ответ может быть неправильным*** (потому что случайность — это придурок), а затем используя математику, чтобы получить контролируемый риском ответ на ваш конкретный вопрос.

Есть что-то извращенное и комичное в его популярности в качестве опоры для риторических издевательств.

Вот почему настоящие эксперты никогда не будут использовать статистику как молот, чтобы вбить Истину в своих врагов. Два лица, принимающие решения, могут использовать одни и те же инструменты для одних и тех же данных и пришли к двум разным — и совершенно обоснованным — выводам… а это значит, что есть что-то одновременно извращенное и комичное в его популярности в качестве опоры для риторических издевательств.

Статистическая значимость является личной. Да просто так I Я достаточно удивлен данными, чтобы изменить свое мнение, но это не значит, что вам следует изменить свое мнение.

Как только я понял как работает статистикаЯ не мог не удивиться тому, насколько высокомерно — почти грубо — объявлять что-то статистически значимым в присутствии людей, которые недостаточно хорошо разбираются в ограничениях принятия статистических решений. Этот термин звучит слишком универсально для всеобщего блага; это играет как «Заткнись и доверься мне, потому что мои методы причудливы» риторический прием. Я надеюсь, что вы присоединитесь ко мне и придадите этой риторике «пфффЭто заслуживает.

Подождите, неужели мы вообще ничему не можем научиться из чужого статистически значимого результата?

Здесь все становится несколько философским, поэтому мне понадобится отдельная статья для мой взгляд на этот вопрос:

Короче говоря, я советую вам делегировать часть принятия решений другим людям, если вы доверяете им, что они компетентны и заботятся о ваших интересах. Когда они убедятся, вы позаимствуете их мнение, чтобы вам не приходилось переделывать всю их работу самостоятельно.

Используя чужие статистические выводы, вы основываете свое решение не на данных, а скорее на своем доверии к отдельному человеку.

Просто имейте в виду, что, используя чужие результаты, вы основываете свое решение не на данных, а скорее на своем доверии к отдельному человеку. Нет никаких проблем с выбором доверять другим, поэтому вам не нужно эмпирически строить свое мировоззрение с нуля — обмен знаниями — это часть того, что делает человеческий вид таким успешным, — но стоит осознавать, что вы можете оказаться на несколько раундов сломленным. телефон после того «знания», на которое, по вашему мнению, вы настраиваетесь.

Если вы позволяете кому-то принимать решения от вашего имени — это значит потреблять чужие ресурсы. р-значение и выводы для принятия решений — тогда убедитесь, что это тот, кого вы считаете достаточно компетентным и заслуживающим доверия.

Что, если человек, который разбрасывает вас статистическим жаргоном, — это тот, кого вы не доверять? Бегите по холмам!

Всякий раз, когда в декларациях статистической значимости чувствуется намек на убедительность, будьте особенно осторожны со всем, что может оратор торгует. Если вы доверяете человеку, с которым разговариваете, вам не нужны его призывы к статистической значимости. Все, что вам нужно знать, это то, что они убеждены. Если вы им не доверяете, вы не могу доверять их статистический жаргон больше, чем вы доверяете их джазовым рукам.

Какая польза от ответа, если вы не удосужились понять, в чем заключался вопрос?

Если есть что-то, что я хотел бы, чтобы вы вынесли из этой статьи в блоге, так это следующее: если вы мало что знаете о лицах, принимающих решения, и о том, как они решают, стоит ли им передумают (и именно о чем), то их претензии, связанные со статистической значимостью, совершенно бессмысленно для тебя. Какая польза от ответа, если вы не удосужились понять, в чем заключался вопрос?

Если вам понравилось здесь и вы ищете прикладной курс по искусственному интеллекту, предназначенный как для новичков, так и для экспертов, вот один, который я создал для вашего развлечения:

Давай будем друзьями! Вы можете найти меня на Twitter, YouTube, Substackи LinkedIn. Хотите, чтобы я выступил на вашем мероприятии? Использовать эта форма связаться.

Вот некоторые из моих любимых 10-минутных прохождений:

*Если вы хотите узнать, что такое значение p, вот видео, которое я сделал, чтобы помочь вам:

**Чтобы получить объяснение проверки гипотез, посетите мой блоге по теме или посмотрите эту пару видео:

Обманутые статистической значимостью Опубликовано из источника https://towardsdatascience.com/fooled-by-statistical-significance-7fed1bc2caf9?source=rss—-7f60cf5620c9—4 через https://towardsdatascience.com/feed

<!–

->