La distribución chi-cuadrado es un caso especial de la distribución gamma y de la distribución Wishart univariante . En concreto, si entonces (donde es el parámetro de forma y el parámetro de escala de la distribución gamma) y .
se distribuye según la distribución de chi-cuadrado con k grados de libertad. Esto se suele denotar como
La distribución chi-cuadrado tiene un parámetro: un entero positivo k que especifica el número de grados de libertad (el número de variables aleatorias que se suman, Z i s).
Introducción
La distribución chi-cuadrado se utiliza principalmente en pruebas de hipótesis y, en menor medida, para intervalos de confianza de varianzas poblacionales cuando la distribución subyacente es normal. A diferencia de distribuciones más conocidas, como la distribución normal y la distribución exponencial , la distribución chi-cuadrado no se aplica con tanta frecuencia en el modelado directo de fenómenos naturales. Surge, entre otras, en las siguientes pruebas de hipótesis:
También es un componente de la definición de la distribución t y la distribución F utilizadas en pruebas t , análisis de varianza y análisis de regresión.
La razón principal por la que la distribución chi-cuadrado se utiliza ampliamente en las pruebas de hipótesis es su relación con la distribución normal. Muchas pruebas de hipótesis utilizan un estadístico de prueba, como el estadístico t en una prueba t . Para estas pruebas de hipótesis, a medida que aumenta el tamaño de la muestra, n , la distribución de muestreo del estadístico de prueba se aproxima a la distribución normal ( teorema del límite central ). Debido a que el estadístico de prueba (como t ) se distribuye normalmente de forma asintótica, siempre que el tamaño de la muestra sea lo suficientemente grande, la distribución utilizada para las pruebas de hipótesis puede aproximarse mediante una distribución normal. La prueba de hipótesis utilizando una distribución normal se entiende bien y es relativamente fácil. La distribución chi-cuadrado más simple es el cuadrado de una distribución normal estándar. Por lo tanto, siempre que se pueda utilizar una distribución normal para una prueba de hipótesis, se puede utilizar una distribución chi-cuadrado.
Supongamos que es una variable aleatoria muestreada de la distribución normal estándar, donde la media es y la varianza es : . Ahora, considere la variable aleatoria . La distribución de la variable aleatoria es un ejemplo de una distribución de chi-cuadrado: . El subíndice 1 indica que esta distribución de chi-cuadrado particular se construye a partir de solo 1 distribución normal estándar. Se dice que una distribución de chi-cuadrado construida elevando al cuadrado una única distribución normal estándar tiene 1 grado de libertad. Por lo tanto, a medida que aumenta el tamaño de la muestra para una prueba de hipótesis, la distribución del estadístico de prueba se aproxima a una distribución normal. Así como los valores extremos de la distribución normal tienen baja probabilidad (y dan valores p pequeños), los valores extremos de la distribución de chi-cuadrado tienen baja probabilidad.
Una razón adicional por la que la distribución chi-cuadrado se usa ampliamente es que aparece como la distribución de muestra grande de las pruebas de razón de verosimilitud generalizadas (LRT). [8] Las LRT tienen varias propiedades deseables; en particular, las LRT simples comúnmente proporcionan la mayor potencia para rechazar la hipótesis nula ( lema de Neyman-Pearson ) y esto también conduce a propiedades de optimalidad de las LRT generalizadas. Sin embargo, las aproximaciones normal y chi-cuadrado solo son válidas asintóticamente. Por esta razón, es preferible usar la distribución t en lugar de la aproximación normal o la aproximación chi-cuadrado para un tamaño de muestra pequeño. De manera similar, en los análisis de tablas de contingencia, la aproximación chi-cuadrado será deficiente para un tamaño de muestra pequeño, y es preferible usar la prueba exacta de Fisher . Ramsey muestra que la prueba binomial exacta es siempre más poderosa que la aproximación normal. [9]
Lancaster muestra las conexiones entre las distribuciones binomial, normal y chi-cuadrado de la siguiente manera. [10] De Moivre y Laplace establecieron que una distribución binomial podía aproximarse mediante una distribución normal. Específicamente, demostraron la normalidad asintótica de la variable aleatoria
donde es el número observado de éxitos en los ensayos, donde la probabilidad de éxito es , y .
Elevando al cuadrado ambos lados de la ecuación obtenemos
Usando , , y , esta ecuación se puede reescribir como
La expresión de la derecha tiene la forma que Karl Pearson generalizaría a la forma
dónde
= estadística de prueba acumulativa de Pearson, que se aproxima asintóticamente a una distribución; = el número de observaciones del tipo ; = la frecuencia esperada (teórica) del tipo , afirmada por la hipótesis nula de que la fracción del tipo en la población es ; y = el número de celdas en la tabla. [ cita requerida ]
En el caso de un resultado binomial (lanzar una moneda), la distribución binomial puede aproximarse mediante una distribución normal (para valores suficientemente grandes ). Debido a que el cuadrado de una distribución normal estándar es la distribución chi-cuadrado con un grado de libertad, la probabilidad de un resultado como 1 cara en 10 ensayos se puede aproximar utilizando la distribución normal directamente o la distribución chi-cuadrado para la diferencia normalizada al cuadrado entre el valor observado y el esperado. Sin embargo, muchos problemas involucran más de los dos resultados posibles de una binomial y, en su lugar, requieren 3 o más categorías, lo que conduce a la distribución multinomial. Así como de Moivre y Laplace buscaron y encontraron la aproximación normal a la binomial, Pearson buscó y encontró una aproximación normal multivariada degenerada a la distribución multinomial (los números en cada categoría se suman al tamaño total de la muestra, que se considera fijo). Pearson demostró que la distribución de chi-cuadrado surgió de una aproximación normal multivariada a la distribución multinomial, tomando en cuenta cuidadosamente la dependencia estadística (correlaciones negativas) entre los números de observaciones en diferentes categorías. [10]
En un caso especial esta función tiene la forma simple:
que se puede derivar fácilmente mediante la integración directa. La recurrencia entera de la función gamma facilita el cálculo para otros números pequeños, incluso .
Las tablas de la función de distribución acumulativa de chi-cuadrado están ampliamente disponibles y la función está incluida en muchas hojas de cálculo y todos los paquetes estadísticos .
Demostración. Sea un vector de variables aleatorias independientes distribuidas normalmente y su media. Entonces,
donde es la matriz identidad y el vector de todos los unos. tiene un vector propio con valor propio , y vectores propios (todos ortogonales a ) con valor propio , que pueden elegirse de modo que sea una matriz ortogonal. Como también , tenemos
que prueba la afirmación.
Aditividad
De la definición de la distribución chi-cuadrado se desprende que la suma de las variables chi-cuadrado independientes también se distribuye chi-cuadrado. En concreto, si son variables chi-cuadrado independientes con , grados de libertad, respectivamente, entonces chi-cuadrado se distribuye con grados de libertad.
Media de la muestra
La media muestral de las variables chi-cuadrado iid de grado se distribuye según una distribución gamma con parámetros de forma y escala :
Asintóticamente, dado que para un parámetro de forma que tiende al infinito, una distribución Gamma converge hacia una distribución normal con expectativa y varianza , la media de la muestra converge hacia:
Obsérvese que habríamos obtenido el mismo resultado invocando en cambio el teorema del límite central , observando que para cada variable chi-cuadrado de grado la expectativa es , y su varianza (y por lo tanto la varianza de la media de la muestra es ).
Los momentos no centrales (momentos brutos) de una distribución chi-cuadrado con grados de libertad se dan por [12] [13]
Cumulantes
Los cumulantes se obtienen fácilmente mediante una expansión en serie de potencias del logaritmo de la función característica:
Concentración
La distribución de chi-cuadrado muestra una fuerte concentración alrededor de su media. Los límites estándar de Laurent-Massart [14] son:
Una consecuencia es que, si es un vector aleatorio gaussiano en , entonces, a medida que la dimensión crece, la longitud al cuadrado del vector se concentra estrechamente alrededor de un ancho : donde el exponente puede elegirse como cualquier valor en .
Propiedades asintóticas
Por el teorema del límite central , debido a que la distribución chi-cuadrado es la suma de variables aleatorias independientes con media y varianza finitas, converge a una distribución normal para valores grandes de . Para muchos propósitos prácticos, para la distribución es suficientemente cercana a una distribución normal , por lo que la diferencia es ignorable. [15] Específicamente, si , entonces como tiende a infinito, la distribución de tiende a una distribución normal estándar. Sin embargo, la convergencia es lenta ya que la asimetría es y el exceso de curtosis es .
La distribución de muestreo de converge a la normalidad mucho más rápido que la distribución de muestreo de , [16] ya que la transformación logarítmica elimina gran parte de la asimetría. [17]
Otras funciones de la distribución chi-cuadrado convergen más rápidamente a una distribución normal. Algunos ejemplos son:
Si entonces se distribuye aproximadamente normalmente con media y varianza unitaria (1922, por RA Fisher , ver (18.23), p. 426 de Johnson. [5]
Si entonces se distribuye aproximadamente normalmente con media y varianza [18] Esto se conoce como la transformación de Wilson-Hilferty , véase (18.24), p. 426 de Johnson. [5]
Esta transformación normalizadora conduce directamente a la aproximación mediana comúnmente utilizada mediante la retrotransformación a partir de la media, que también es la mediana de la distribución normal.
La distribución t no central se puede obtener a partir de la distribución normal y la distribución chi-cuadrado.
Una variable chi-cuadrado con grados de libertad se define como la suma de los cuadrados de variables aleatorias normales estándar independientes .
Si es un vector aleatorio gaussiano -dimensional con vector de media y matriz de covarianza de rangos , entonces se distribuye mediante chi-cuadrado con grados de libertad.
Si es un vector de variables aleatorias normales estándar iid y es una matriz simétrica e idempotente con rango , entonces la forma cuadrática tiene una distribución de chi-cuadrado con grados de libertad.
Si es una matriz de covarianza positiva-semidefinida con entradas diagonales estrictamente positivas, entonces para y un vector aleatorio independiente de tal que y entonces
[17]
La distribución chi-cuadrado también está relacionada naturalmente con otras distribuciones derivadas de la gaussiana. En particular,
tiene una distribución F , si , donde y son estadísticamente independientes.
Si y son estadísticamente independientes, entonces . Si y no son independientes, entonces no se distribuye según el método de chi-cuadrado.
Generalizaciones
La distribución chi-cuadrado se obtiene como la suma de los cuadrados de k variables aleatorias gaussianas independientes, de media cero y varianza unitaria. Se pueden obtener generalizaciones de esta distribución sumando los cuadrados de otros tipos de variables aleatorias gaussianas. A continuación se describen varias de estas distribuciones.
Combinación lineal
Si son variables aleatorias de chi-cuadrado y , entonces la distribución de es un caso especial de una distribución de chi-cuadrado generalizada . No se conoce una expresión cerrada para esta distribución. Sin embargo, se puede aproximar de manera eficiente utilizando la propiedad de las funciones características de las variables aleatorias de chi-cuadrado. [20]
Distribuciones de chi-cuadrado
Distribución de chi-cuadrado no central
La distribución chi-cuadrado no central se obtiene de la suma de los cuadrados de variables aleatorias gaussianas independientes que tienen varianza unitaria y medias distintas de cero .
Distribución de chi-cuadrado generalizada
La distribución chi-cuadrado generalizada se obtiene a partir de la forma cuadrática z'Az, donde z es un vector gaussiano de media cero que tiene una matriz de covarianza arbitraria y A es una matriz arbitraria.
Distribuciones gamma, exponencial y relacionadas
La distribución chi-cuadrado es un caso especial de la distribución gamma , ya que utiliza la parametrización de velocidad de la distribución gamma (o utiliza la parametrización de escala de la distribución gamma) donde k es un número entero.
La distribución de Erlang también es un caso especial de la distribución gamma y por lo tanto también tenemos que si con par , entonces Erlang se distribuye con parámetro de forma y parámetro de escala .
A continuación se presentan algunas de las situaciones más comunes en las que la distribución de chi-cuadrado surge de una muestra distribuida gaussiana.
El cuadro siguiente muestra algunas estadísticas basadas en variables aleatorias independientes que tienen distribuciones de probabilidad relacionadas con la distribución de chi-cuadrado:
La distribución de chi-cuadrado también se encuentra a menudo en la resonancia magnética . [21]
Métodos computacionales
Tabla deχ2valores vspag-valores
El valor - es la probabilidad de observar un estadístico de prueba al menos tan extremo en una distribución chi-cuadrado. En consecuencia, dado que la función de distribución acumulativa (CDF) para los grados de libertad (gl) apropiados da la probabilidad de haber obtenido un valor menos extremo que este punto, restando el valor de CDF de 1 se obtiene el valor p . Un valor p bajo , por debajo del nivel de significación elegido, indica significación estadística , es decir, evidencia suficiente para rechazar la hipótesis nula. Un nivel de significación de 0,05 se utiliza a menudo como el punto de corte entre resultados significativos y no significativos.
La siguiente tabla proporciona una serie de valores p que coinciden con los primeros 10 grados de libertad.
Estos valores se pueden calcular evaluando la función cuantil (también conocida como "CDF inversa" o "ICDF") de la distribución chi-cuadrado; [23] por ejemplo, la ICDF de χ 2 para p = 0,05 y df = 7 produce 2,1673 ≈ 2,17 como en la tabla anterior, teniendo en cuenta que 1 – p es el valor p de la tabla.
Historia
Esta distribución fue descrita por primera vez por el geodesista y estadístico alemán Friedrich Robert Helmert en artículos de 1875-6, [24] [25] donde calculó la distribución de muestreo de la varianza de la muestra de una población normal. Por ello, en alemán se la conocía tradicionalmente como distribución de Helmert ("Helmertiana") o "distribución de Helmert".
La distribución fue redescubierta independientemente por el matemático inglés Karl Pearson en el contexto de bondad de ajuste , para lo cual desarrolló su prueba de chi-cuadrado de Pearson , publicada en 1900, con una tabla calculada de valores publicada en (Elderton 1902), recopilada en (Pearson 1914, pp. xxxi–xxxiii, 26–28, Tabla XII). El nombre "chi-cuadrado" deriva en última instancia de la abreviatura de Pearson para el exponente en una distribución normal multivariante con la letra griega Chi , escribiendo −½χ 2 para lo que aparecería en la notación moderna como −½ x T Σ −1 x (siendo Σ la matriz de covarianza ). [26] Sin embargo, la idea de una familia de "distribuciones de chi-cuadrado" no se debe a Pearson, sino que surgió como un desarrollo posterior debido a Fisher en la década de 1920. [24]
^ MA Sanders. «Función característica de la distribución central de chi-cuadrado» (PDF) . Archivado desde el original (PDF) el 2011-07-15 . Consultado el 2009-03-06 .
^ Weisstein, Eric W. "Distribución de chi-cuadrado". mathworld.wolfram.com . Consultado el 11 de octubre de 2024 .
^ Abramowitz, Milton ; Stegun, Irene Ann , eds. (1983) [junio de 1964]. "Capítulo 26". Manual de funciones matemáticas con fórmulas, gráficos y tablas matemáticas . Serie de Matemáticas Aplicadas. Vol. 55 (Novena reimpresión con correcciones adicionales de la décima impresión original con correcciones (diciembre de 1972); primera ed.). Washington DC; Nueva York: Departamento de Comercio de los Estados Unidos, Oficina Nacional de Normas; Dover Publications. pág. 940. ISBN978-0-486-61272-0. LCCN 64-60036. MR 0167642. LCCN 65-12253.
^ NIST (2006). Manual de estadística de ingeniería: distribución de chi-cuadrado
^ abc Johnson, NL; Kotz, S.; Balakrishnan, N. (1994). "Distribuciones de chi-cuadrado que incluyen chi y Rayleigh". Distribuciones univariadas continuas . Vol. 1 (segunda edición). John Wiley and Sons. págs. 415–493. ISBN978-0-471-58495-7.
^ Mood, Alexander; Graybill, Franklin A.; Boes, Duane C. (1974). Introducción a la teoría de la estadística (tercera edición). McGraw-Hill. págs. 241–246. ISBN978-0-07-042864-5.
^ "La distribución de chi-cuadrado" (PDF) . Universidad de Regina .
^ Westfall, Peter H. (2013). Comprensión de los métodos estadísticos avanzados . Boca Raton, FL: CRC Press. ISBN978-1-4665-1210-8.
^ Ramsey, PH (1988). "Evaluación de la aproximación normal a la prueba binomial". Revista de estadística educativa . 13 (2): 173–82. doi :10.2307/1164752. JSTOR 1164752.
^ ab Lancaster, HO (1969), La distribución de chi-cuadrado , Wiley
^ Dasgupta, Sanjoy DA; Gupta, Anupam K. (enero de 2003). "Una prueba elemental de un teorema de Johnson y Lindenstrauss" (PDF) . Estructuras aleatorias y algoritmos . 22 (1): 60–65. doi :10.1002/rsa.10073. S2CID 10327785 . Consultado el 1 de mayo de 2012 .
^ Distribución de chi-cuadrado, de MathWorld , consultado el 11 de febrero de 2009
^ MK Simon, Distribuciones de probabilidad que involucran variables aleatorias gaussianas , Nueva York: Springer, 2002, ecuación (2.35), ISBN 978-0-387-34657-1
^ Laurent, B.; Massart, P. (1 de octubre de 2000). "Estimación adaptativa de una función cuadrática mediante selección de modelo". Anales de estadística . 28 (5). doi : 10.1214/aos/1015957395 . ISSN 0090-5364. S2CID 116945590.
^ Box, Hunter y Hunter (1978). Estadísticas para experimentadores . Wiley. pág. 118. ISBN.978-0-471-09315-2.
^ Bartlett, MS; Kendall, DG (1946). "El análisis estadístico de la heterogeneidad de varianza y la transformación logarítmica". Suplemento de la revista Journal of the Royal Statistical Society . 8 (1): 128–138. doi :10.2307/2983618. JSTOR 2983618.
^ ab Pillai, Natesh S. (2016). "Un encuentro inesperado con Cauchy y Lévy". Anales de Estadística . 44 (5): 2089–2097. arXiv : 1505.01957 . doi :10.1214/15-aos1407. S2CID 31582370.
^ Wilson, EB; Hilferty, MM (1931). "La distribución de chi-cuadrado". Proc. Natl. Sci. USA . 17 (12): 684–688. Bibcode :1931PNAS...17..684W. doi : 10.1073/pnas.17.12.684 . PMC 1076144 . PMID 16577411.
^ Bäckström, T.; Fischer, J. (enero de 2018). "Aleatorización rápida para codificación distribuida de baja tasa de bits de voz y audio" (PDF) . Transacciones IEEE/ACM sobre procesamiento de audio, voz y lenguaje . 26 (1): 19–30. doi :10.1109/TASLP.2017.2757601. S2CID 19777585.
^ Bausch, J. (2013). "Sobre el cálculo eficiente de una combinación lineal de variables aleatorias de chi-cuadrado con una aplicación en el conteo de vacíos de cadenas". J. Phys. A: Math. Theor . 46 (50): 505202. arXiv : 1208.2691 . Bibcode :2013JPhA...46X5202B. doi :10.1088/1751-8113/46/50/505202. S2CID 119721108.
^ den Dekker AJ, Sijbers J., (2014) "Distribuciones de datos en imágenes de resonancia magnética: una revisión", Physica Medica , [1]
^ Prueba de chi-cuadrado Archivado el 18 de noviembre de 2013 en Wayback Machine Tabla B.2. Dra. Jacqueline S. McLaughlin de la Universidad Estatal de Pensilvania. Citando a su vez: RA Fisher y F. Yates, Tablas estadísticas para la investigación biológica, agrícola y médica, 6.ª ed., Tabla IV. Se han corregido dos valores, 7,82 con 7,81 y 4,60 con 4,61.
^ ab Hald 1998, pp. 633–692, 27. Distribuciones de muestreo bajo normalidad.
^ FR Helmert , "Ueber die Wahrscheinlichkeit der Potenzsummen der Beobachtungsfehler und über einige damit im Zusammenhange stehende Fragen", Zeitschrift für Mathematik und Physik 21, 1876, págs.
^ RL Plackett, Karl Pearson y la prueba de chi-cuadrado , International Statistical Review, 1983, 61f. Véase también Jeff Miller, Los primeros usos conocidos de algunas de las palabras de las matemáticas.
^ Sun, Jingchao; Kong, Maiying; Pal, Subhadip (22 de junio de 2021). "La distribución seminormal modificada: propiedades y un esquema de muestreo eficiente" (PDF) . Comunicaciones en estadística: teoría y métodos . 52 (5): 1591–1613. doi :10.1080/03610926.2021.1934700. ISSN 0361-0926. S2CID 237919587.
Lectura adicional
Hald, Anders (1998). Una historia de la estadística matemática desde 1750 hasta 1930. Nueva York: Wiley. ISBN 978-0-471-17912-2.
Elderton, William Palin (1902). "Tablas para probar la bondad de ajuste de la teoría a la observación". Biometrika . 1 (2): 155–163. doi :10.1093/biomet/1.2.155.
Pearson, Karl (1914). "Sobre la probabilidad de que dos distribuciones independientes de frecuencia sean en realidad muestras de la misma población, con especial referencia a trabajos recientes sobre la identidad de cepas de tripanosoma". Biometrika . 10 : 85–154. doi :10.1093/biomet/10.1.85.
Enlaces externos
Los primeros usos de algunas palabras de las matemáticas: la entrada sobre Chi cuadrado tiene una breve historia
Notas del curso sobre pruebas de bondad de ajuste de Chi-cuadrado de la clase de Estadística 101 de la Universidad de Yale.
Demostración de Mathematica que muestra la distribución de muestreo de chi-cuadrado de varias estadísticas, por ejemplo, Σx², para una población normal
Algoritmo simple para aproximar la función de distribución de probabilidad y la función de distribución de probabilidad inversa para la distribución de chi-cuadrado con una calculadora de bolsillo