WikiDer > Гармоническое среднее значение p
В гармоническое среднее п-ценить[1][2][3] (HMP) это статистический метод решения проблема множественных сравнений что контролирует уровень ошибок с точки зрения семьи.[2] Это улучшает мощность из Коррекция Бонферрони путем выполнения комбинированных тестов, т.е. группы из п-значения статистически значимы, например Метод Фишера.[4] Однако это позволяет избежать ограничительного предположения, что п-значения независимый, в отличие от метода Фишера.[2][3] Следовательно, он контролирует ложноположительный рейтинг когда тесты являются зависимыми, за счет меньшей мощности (т.е. ложноотрицательная ставка), когда тесты независимы.[2] Помимо предоставления альтернативы таким подходам, как Коррекция Бонферрони который контролирует строгие частота ошибок в семье, он также является альтернативой широко используемому Процедура Бенджамини-Хохберга (BH) для контроля менее строгих коэффициент ложного обнаружения.[5] Это потому, что способность HMP обнаруживать значительные группы гипотез больше, чем способность BH обнаруживать значимые индивидуальный гипотезы.[2]
Есть две версии техники: (i) прямая интерпретация HMP как приблизительный п-значение и (ii) процедура преобразования HMP в асимптотически точный п-ценить. Подход обеспечивает многоуровневая процедура испытаний в котором самые маленькие группы п-значения, которые являются статистически значимыми, могут быть найдены.
Прямая интерпретация гармонического среднего п-ценить
В взвешенное гармоническое среднее из п-значения определяется как
В общем, интерпретация HMP напрямую как п-значение является антиконсервативным, что означает, что ложноположительный рейтинг выше, чем ожидалось. Однако по мере того, как HMP становится меньше, при определенных допущениях, расхождение уменьшается, так что прямая интерпретация значимости приводит к ложноположительной частоте, близкой к той, которая подразумевается для достаточно малых значений (например, ).[2]
HMP никогда не бывает антиконсервативным по большей части. для маленьких , или же для больших .[3] Однако эти границы представляют собой наихудшие сценарии при произвольной зависимости, которые на практике могут оказаться консервативными. Вместо того, чтобы применять эти оценки, асимптотически точные п-значения могут быть получены путем преобразования HMP.
Асимптотически точное гармоническое среднее п-значение процедуры
Обобщенная центральная предельная теорема показывает, что асимптотически точный п-ценить, , можно вычислить из HMP, , используя формулу[2]
p.hmp
командование гармонический
Пакет R; а руководство доступно в Интернете.Точно так же можно сравнить HMP с таблицей критических значений (Таблица 1). Таблица показывает, что чем меньше частота ложных срабатываний и меньше количество тестов, тем ближе критическое значение к частоте ложных срабатываний.
10 | 0.040 | 0.0094 | 0.00099 |
100 | 0.036 | 0.0092 | 0.00099 |
1,000 | 0.034 | 0.0090 | 0.00099 |
10,000 | 0.031 | 0.0088 | 0.00098 |
100,000 | 0.029 | 0.0086 | 0.00098 |
1,000,000 | 0.027 | 0.0084 | 0.00098 |
10,000,000 | 0.026 | 0.0083 | 0.00098 |
100,000,000 | 0.024 | 0.0081 | 0.00098 |
1,000,000,000 | 0.023 | 0.0080 | 0.00097 |
Многократное тестирование через многоуровневую процедуру тестирования
Если HMP значим на каком-то уровне для группы п-значения, можно искать все подмножества п-значения для самой маленькой значимой группы при сохранении строгого уровня ошибок в семье.[2] Формально это составляет процедура закрытого тестирования.[6]
Когда маленький (например, ), следующий многоуровневый тест, основанный на прямой интерпретации HMP, контролирует интенсивность семейных ошибок на уровне приблизительно
- Определите HMP любого подмножества из п-значения быть
- Отвергните нулевую гипотезу о том, что ни один из п-значения в подмножестве имеют значение, если , куда . (Напомним, что по определению .)
Асимптотически точная версия вышеизложенного заменяет на шаге 2 с
Поскольку прямая интерпретация HMP выполняется быстрее, можно использовать двухпроходную процедуру для идентификации подмножеств п-значения, которые могут быть значимыми при прямой интерпретации, при условии подтверждения с использованием асимптотически точной формулы.
Свойства HMP
HMP обладает рядом свойств, которые вытекают из обобщенной центральной предельной теоремы.[2] Это:
- От устойчивой до положительной зависимости между п-значения.
- Нечувствителен к точному количеству тестов, L.
- Устойчив к распределению весов, ш.
- Больше всего под влиянием самых маленьких п-значения.
Когда HMP не имеет значения, нет ни одного подмножества составляющих тестов. И наоборот, когда многоуровневый тест считает, что подмножество п-значения должны быть значительными, HMP для всех п- совокупные значения, вероятно, будут значительными; это очевидно, когда HMP интерпретируется напрямую. Когда цель - оценить значимость индивидуальный п-значения, так что комбинированные тесты, касающиеся группы из п-значения не представляют интереса, HMP эквивалентен Бонферрони процедура, но с учетом более строгого порога значимости (Таблица 1).
HMP предполагает, что индивидуальный п-значения имеют (не обязательно независимые) стандартная униформа распределения, когда их нулевые гипотезы верны. Поэтому большое количество тестов с недостаточной мощностью может повредить мощность HMP.
Хотя выбор весов не важен для валидности HMP при нулевой гипотезе, весовые коэффициенты влияют на мощность процедуры. Дополнительные методы §5C [2] и онлайн руководство рассмотрим вопрос более подробно.
Байесовские интерпретации HMP
HMP был задуман по аналогии с усреднением байесовской модели и может интерпретироваться как обратно пропорциональный усредненному по модели. Фактор Байеса при объединении п-значения от тесты отношения правдоподобия.[1][2]
Гармоническое среднее эмпирическое правило
И. Дж. Хорошо сообщили об эмпирической взаимосвязи между байесовским фактором и п-значение теста отношения правдоподобия.[1] Для нулевой гипотезы вложен в более общую альтернативную гипотезу он заметил, что часто,
Байесовская калибровка п-значения
Если распределения п-значения по альтернативным гипотезам следуют Бета-распределения с параметрами , форма, рассмотренная Селлке, Баярри и Бергером,[13] то обратная пропорциональность между усредненным по модели байесовским фактором и HMP может быть формализована как[2][14]
- априорная вероятность альтернативной гипотезы такой, что
- ожидаемое значение при альтернативной гипотезе
- вес, приписываемый п-ценить
- включает вероятности и мощности априорной модели в веса, и
- нормализует веса.
Приближение лучше всего подходит для тестов с хорошей производительностью ().
Гармоническое среднее п-значение как граница байесовского фактора
Для тестов отношения правдоподобия ровно с двумя степенями свободы Теорема Уилкса подразумевает, что , куда это максимальное отношение правдоподобия в пользу альтернативной гипотезы и поэтому , куда является средневзвешенным максимальным отношением правдоподобия с использованием весов С является верхней границей байесовского фактора, , тогда - это верхняя граница усредненного по модели байесовского фактора:
В предположении, что распределения п-значения по альтернативным гипотезам следуют Бета-распределения с параметрами и что веса HMP обеспечивает более жесткую верхнюю границу усредненного по модели байесовского фактора:
Рекомендации
- ^ а б c Хорошо, И. Дж (1958). «Параллельные и последовательные испытания значимости». Журнал Американской статистической ассоциации. 53 (284): 799–813. Дои:10.1080/01621459.1958.10501480. JSTOR 2281953.
- ^ а б c d е ж грамм час я j k л м п Уилсон, Д. Дж. (2019). "Среднее гармоническое п-значение для объединения зависимых тестов ». Труды Национальной академии наук США. 116 (4): 1195–1200. Дои:10.1073 / pnas.1814092116. ЧВК 6347718. PMID 30610179.
- ^ а б c Вовк, Владимир; Ван, Руоду (25 апреля 2019 г.). «Объединение значений p посредством усреднения» (PDF). Алгоритмическое обучение в случайном мире.
- ^ Фишер, Р. А. (1934). Статистические методы для научных работников (5-е изд.). Эдинбург, Великобритания: Оливер и Бойд.
- ^ Бенджамини Y, Хохберг Y (1995). «Контроль ложного обнаружения: практичный и эффективный подход к множественному тестированию». Журнал Королевского статистического общества. Серия B (Методологическая). 57 (1): 289–300. Дои:10.1111 / j.2517-6161.1995.tb02031.x. JSTOR 2346101.
- ^ Маркус Р., Эрик П., Габриэль К. Р. (1976). «О процедурах закрытого тестирования с особым упором на заказной дисперсионный анализ». Биометрика. 63 (3): 655–660. Дои:10.1093 / biomet / 63.3.655. JSTOR 2335748.
- ^ Уилсон, Дэниел Дж (17 августа 2019 г.). «Обновленная поправка к» гармоническому среднему значению p для объединения независимых тестов"" (PDF).
- ^ Хорошо, И. Дж (1984). «C192. Один хвост против двух хвостов и эмпирическое правило гармонического среднего». Журнал статистических вычислений и моделирования. 19 (2): 174–176. Дои:10.1080/00949658408810727.
- ^ Хорошо, И. Дж (1984). «C193. Парные и непарные сравнения и эмпирическое правило гармонического среднего». Журнал статистических вычислений и моделирования. 19 (2): 176–177. Дои:10.1080/00949658408810728.
- ^ Хорошо, И. Дж (1984). Параллельно "C213. Уточнение эмпирического правила гармонического среднего для объединения тестов""". Журнал статистических вычислений и моделирования. 20 (2): 173–176. Дои:10.1080/00949658408810770.
- ^ Хорошо, И. Дж (1984). «C214. Эмпирическое правило гармонического среднего: некоторые классы приложений». Журнал статистических вычислений и моделирования. 20 (2): 176–179. Дои:10.1080/00949658408810771.
- ^ Хорошо, Ирвинг Джон. (2009). Хорошее мышление: основы вероятности и ее приложения. Dover Publications. ISBN 9780486474380. OCLC 319491702.
- ^ Селлке, Томас; Баярри, М. Дж; Бергер, Джеймс О (2001). «Калибровка значений p для проверки точных нулевых гипотез». Американский статистик. 55 (1): 62–71. Дои:10.1198/000313001300339950. ISSN 0003-1305.
- ^ Уилсон, Д. Дж. (2019). "Ответ на удержание: когда является средним гармоническим п-значить байесовский фактор? " (PDF). Труды Национальной академии наук США. 116 (13): 5857–5858. Дои:10.1073 / пнас.1902157116. ЧВК 6442550. PMID 30890643.
- ^ Хелд, Л. (2019). "О байесовской интерпретации гармонического среднего п-ценить". Труды Национальной академии наук США. 116 (13): 5855–5856. Дои:10.1073 / pnas.1900671116. PMID 30890644.