WikiDer > Гармоническое среднее значение p

Harmonic mean p-value

В гармоническое среднее п-ценить[1][2][3] (HMP) это статистический метод решения проблема множественных сравнений что контролирует уровень ошибок с точки зрения семьи.[2] Это улучшает мощность из Коррекция Бонферрони путем выполнения комбинированных тестов, т.е. группы из п-значения статистически значимы, например Метод Фишера.[4] Однако это позволяет избежать ограничительного предположения, что п-значения независимый, в отличие от метода Фишера.[2][3] Следовательно, он контролирует ложноположительный рейтинг когда тесты являются зависимыми, за счет меньшей мощности (т.е. ложноотрицательная ставка), когда тесты независимы.[2] Помимо предоставления альтернативы таким подходам, как Коррекция Бонферрони который контролирует строгие частота ошибок в семье, он также является альтернативой широко используемому Процедура Бенджамини-Хохберга (BH) для контроля менее строгих коэффициент ложного обнаружения.[5] Это потому, что способность HMP обнаруживать значительные группы гипотез больше, чем способность BH обнаруживать значимые индивидуальный гипотезы.[2]

Есть две версии техники: (i) прямая интерпретация HMP как приблизительный п-значение и (ii) процедура преобразования HMP в асимптотически точный п-ценить. Подход обеспечивает многоуровневая процедура испытаний в котором самые маленькие группы п-значения, которые являются статистически значимыми, могут быть найдены.

Прямая интерпретация гармонического среднего п-ценить

В взвешенное гармоническое среднее из п-значения определяется как

куда веса, которые должны суммироваться в единицу, т.е. . Могут быть выбраны равные веса, и в этом случае .

В общем, интерпретация HMP напрямую как п-значение является антиконсервативным, что означает, что ложноположительный рейтинг выше, чем ожидалось. Однако по мере того, как HMP становится меньше, при определенных допущениях, расхождение уменьшается, так что прямая интерпретация значимости приводит к ложноположительной частоте, близкой к той, которая подразумевается для достаточно малых значений (например, ).[2]

HMP никогда не бывает антиконсервативным по большей части. для маленьких , или же для больших .[3] Однако эти границы представляют собой наихудшие сценарии при произвольной зависимости, которые на практике могут оказаться консервативными. Вместо того, чтобы применять эти оценки, асимптотически точные п-значения могут быть получены путем преобразования HMP.

Асимптотически точное гармоническое среднее п-значение процедуры

Обобщенная центральная предельная теорема показывает, что асимптотически точный п-ценить, , можно вычислить из HMP, , используя формулу[2]

При условии соблюдения предположений обобщенная центральная предельная теорема, это преобразовало п-значение становится точным как количество тестов, , становится большим. В вычислении используется Распределение Ландау, функция плотности которого может быть записана
Тест проводится p.hmp командование гармонический Пакет R; а руководство доступно в Интернете.

Точно так же можно сравнить HMP с таблицей критических значений (Таблица 1). Таблица показывает, что чем меньше частота ложных срабатываний и меньше количество тестов, тем ближе критическое значение к частоте ложных срабатываний.

Таблица 1. Критические значения для HMP для разного количества тестов и ложные срабатывания .[2]
100.0400.00940.00099
1000.0360.00920.00099
1,0000.0340.00900.00099
10,0000.0310.00880.00098
100,0000.0290.00860.00098
1,000,0000.0270.00840.00098
10,000,0000.0260.00830.00098
100,000,0000.0240.00810.00098
1,000,000,0000.0230.00800.00097

Многократное тестирование через многоуровневую процедуру тестирования

Если HMP значим на каком-то уровне для группы п-значения, можно искать все подмножества п-значения для самой маленькой значимой группы при сохранении строгого уровня ошибок в семье.[2] Формально это составляет процедура закрытого тестирования.[6]

Когда маленький (например, ), следующий многоуровневый тест, основанный на прямой интерпретации HMP, контролирует интенсивность семейных ошибок на уровне приблизительно

  1. Определите HMP любого подмножества из п-значения быть
  2. Отвергните нулевую гипотезу о том, что ни один из п-значения в подмножестве имеют значение, если , куда . (Напомним, что по определению .)


Асимптотически точная версия вышеизложенного заменяет на шаге 2 с

куда дает количество п-значения, а не только в подмножестве .[7]

Поскольку прямая интерпретация HMP выполняется быстрее, можно использовать двухпроходную процедуру для идентификации подмножеств п-значения, которые могут быть значимыми при прямой интерпретации, при условии подтверждения с использованием асимптотически точной формулы.

Свойства HMP

HMP обладает рядом свойств, которые вытекают из обобщенной центральной предельной теоремы.[2] Это:

  • От устойчивой до положительной зависимости между п-значения.
  • Нечувствителен к точному количеству тестов, L.
  • Устойчив к распределению весов, ш.
  • Больше всего под влиянием самых маленьких п-значения.

Когда HMP не имеет значения, нет ни одного подмножества составляющих тестов. И наоборот, когда многоуровневый тест считает, что подмножество п-значения должны быть значительными, HMP для всех п- совокупные значения, вероятно, будут значительными; это очевидно, когда HMP интерпретируется напрямую. Когда цель - оценить значимость индивидуальный п-значения, так что комбинированные тесты, касающиеся группы из п-значения не представляют интереса, HMP эквивалентен Бонферрони процедура, но с учетом более строгого порога значимости (Таблица 1).

HMP предполагает, что индивидуальный п-значения имеют (не обязательно независимые) стандартная униформа распределения, когда их нулевые гипотезы верны. Поэтому большое количество тестов с недостаточной мощностью может повредить мощность HMP.

Хотя выбор весов не важен для валидности HMP при нулевой гипотезе, весовые коэффициенты влияют на мощность процедуры. Дополнительные методы §5C [2] и онлайн руководство рассмотрим вопрос более подробно.

Байесовские интерпретации HMP

HMP был задуман по аналогии с усреднением байесовской модели и может интерпретироваться как обратно пропорциональный усредненному по модели. Фактор Байеса при объединении п-значения от тесты отношения правдоподобия.[1][2]

Гармоническое среднее эмпирическое правило

И. Дж. Хорошо сообщили об эмпирической взаимосвязи между байесовским фактором и п-значение теста отношения правдоподобия.[1] Для нулевой гипотезы вложен в более общую альтернативную гипотезу он заметил, что часто,

куда обозначает байесовский фактор в пользу против Экстраполируя, он предложил практическое правило, согласно которому HMP считается обратно пропорциональным среднему по модели байесовскому фактору для набора тесты с общей нулевой гипотезой:
Хорошо, что его практическое правило поддерживает взаимозаменяемость между Байесовский и классический подходы к проверке гипотез.[8][9][10][11][12]

Байесовская калибровка п-значения

Если распределения п-значения по альтернативным гипотезам следуют Бета-распределения с параметрами , форма, рассмотренная Селлке, Баярри и Бергером,[13] то обратная пропорциональность между усредненным по модели байесовским фактором и HMP может быть формализована как[2][14]

куда

  • априорная вероятность альтернативной гипотезы такой, что
  • ожидаемое значение при альтернативной гипотезе
  • вес, приписываемый п-ценить
  • включает вероятности и мощности априорной модели в веса, и
  • нормализует веса.

Приближение лучше всего подходит для тестов с хорошей производительностью ().

Гармоническое среднее п-значение как граница байесовского фактора

Для тестов отношения правдоподобия ровно с двумя степенями свободы Теорема Уилкса подразумевает, что , куда это максимальное отношение правдоподобия в пользу альтернативной гипотезы и поэтому , куда является средневзвешенным максимальным отношением правдоподобия с использованием весов С является верхней границей байесовского фактора, , тогда - это верхняя граница усредненного по модели байесовского фактора:

Хотя эквивалентность сохраняется только для двух степеней свободы, соотношение между и и поэтому аналогично ведет себя для других степеней свободы.[2]

В предположении, что распределения п-значения по альтернативным гипотезам следуют Бета-распределения с параметрами и что веса HMP обеспечивает более жесткую верхнюю границу усредненного по модели байесовского фактора:

результат, который снова воспроизводит обратную пропорциональность эмпирической зависимости Гуда.[15]

Рекомендации

  1. ^ а б c Хорошо, И. Дж (1958). «Параллельные и последовательные испытания значимости». Журнал Американской статистической ассоциации. 53 (284): 799–813. Дои:10.1080/01621459.1958.10501480. JSTOR 2281953.
  2. ^ а б c d е ж грамм час я j k л м п Уилсон, Д. Дж. (2019). "Среднее гармоническое п-значение для объединения зависимых тестов ». Труды Национальной академии наук США. 116 (4): 1195–1200. Дои:10.1073 / pnas.1814092116. ЧВК 6347718. PMID 30610179.
  3. ^ а б c Вовк, Владимир; Ван, Руоду (25 апреля 2019 г.). «Объединение значений p посредством усреднения» (PDF). Алгоритмическое обучение в случайном мире.
  4. ^ Фишер, Р. А. (1934). Статистические методы для научных работников (5-е изд.). Эдинбург, Великобритания: Оливер и Бойд.
  5. ^ Бенджамини Y, Хохберг Y (1995). «Контроль ложного обнаружения: практичный и эффективный подход к множественному тестированию». Журнал Королевского статистического общества. Серия B (Методологическая). 57 (1): 289–300. Дои:10.1111 / j.2517-6161.1995.tb02031.x. JSTOR 2346101.
  6. ^ Маркус Р., Эрик П., Габриэль К. Р. (1976). «О процедурах закрытого тестирования с особым упором на заказной дисперсионный анализ». Биометрика. 63 (3): 655–660. Дои:10.1093 / biomet / 63.3.655. JSTOR 2335748.
  7. ^ Уилсон, Дэниел Дж (17 августа 2019 г.). «Обновленная поправка к» гармоническому среднему значению p для объединения независимых тестов"" (PDF).
  8. ^ Хорошо, И. Дж (1984). «C192. Один хвост против двух хвостов и эмпирическое правило гармонического среднего». Журнал статистических вычислений и моделирования. 19 (2): 174–176. Дои:10.1080/00949658408810727.
  9. ^ Хорошо, И. Дж (1984). «C193. Парные и непарные сравнения и эмпирическое правило гармонического среднего». Журнал статистических вычислений и моделирования. 19 (2): 176–177. Дои:10.1080/00949658408810728.
  10. ^ Хорошо, И. Дж (1984). Параллельно "C213. Уточнение эмпирического правила гармонического среднего для объединения тестов""". Журнал статистических вычислений и моделирования. 20 (2): 173–176. Дои:10.1080/00949658408810770.
  11. ^ Хорошо, И. Дж (1984). «C214. Эмпирическое правило гармонического среднего: некоторые классы приложений». Журнал статистических вычислений и моделирования. 20 (2): 176–179. Дои:10.1080/00949658408810771.
  12. ^ Хорошо, Ирвинг Джон. (2009). Хорошее мышление: основы вероятности и ее приложения. Dover Publications. ISBN 9780486474380. OCLC 319491702.
  13. ^ Селлке, Томас; Баярри, М. Дж; Бергер, Джеймс О (2001). «Калибровка значений p для проверки точных нулевых гипотез». Американский статистик. 55 (1): 62–71. Дои:10.1198/000313001300339950. ISSN 0003-1305.
  14. ^ Уилсон, Д. Дж. (2019). "Ответ на удержание: когда является средним гармоническим п-значить байесовский фактор? " (PDF). Труды Национальной академии наук США. 116 (13): 5857–5858. Дои:10.1073 / пнас.1902157116. ЧВК 6442550. PMID 30890643.
  15. ^ Хелд, Л. (2019). "О байесовской интерпретации гармонического среднего п-ценить". Труды Национальной академии наук США. 116 (13): 5855–5856. Дои:10.1073 / pnas.1900671116. PMID 30890644.