Autor Tema: Coeficiente de correlación

0 Usuarios y 1 Visitante están viendo este tema.

20 Marzo, 2012, 08:40 pm
Leído 1894 veces

Gaussa

  • $$\Large \color{#5b61b3}\pi\,\pi\,\pi\,\pi\,\pi$$
  • Mensajes: 1,551
  • Karma: +1/-0
  • Sexo: Femenino
Hola.

Tengo el siguiente ejercicio.

Demuestra que el coeficiente de correlación, \( r_s \), en ausencia de empates, verifica la expresión:

\( r_s=1-\displaystyle\frac{6\displaystyle\sum_{i=1}^n{d_i^2}}{n(n^2-1)} \)

Ayuda: \( \displaystyle\sum_{i=1}^n{i}=\displaystyle\frac{n(n+1)}{2} \), \( \displaystyle\sum_{i=1}^n{i^2}=\displaystyle\frac{n(n+1)(2n+1)}{6} \)

Llevo días con él, pero no me sale. Me gustaría al menos tener una pista. He probado de todo. ¿Es \( \bar{x}=\bar{y}= \displaystyle\sum_{i=1}^n{i}=\displaystyle\frac{n(n+1)}{2} \)?

Saludos y muchas gracias.

21 Marzo, 2012, 05:36 am
Respuesta #1

pierrot

  • pabloN
  • Moderador Global
  • Mensajes: 3,447
  • País: uy
  • Karma: +0/-0
  • Sexo: Masculino
Hola Gaussa

¿Es \( \bar{x}=\bar{y}= \displaystyle\sum_{i=1}^n{i}=\displaystyle\frac{n(n+1)}{2} \)?

No. Es el promedio de los rangos. Te faltó dividir entre \( n \), ¿no?. Ha de ser: \( \bar{x}=\bar{y}=\displaystyle\frac{1}{n}\sum_{i=1}^n{i}=\displaystyle\frac{n+1}{2} \).

Saludos
$_="loe  hnachaPkr erttes,urJ";$j=0;for($i=0;s/(.)(.{$j})$//;$i++){$_=$2.$_,$j+=1-$i%2,print$1}print

21 Marzo, 2012, 05:07 pm
Respuesta #2

Gaussa

  • $$\Large \color{#5b61b3}\pi\,\pi\,\pi\,\pi\,\pi$$
  • Mensajes: 1,551
  • Karma: +1/-0
  • Sexo: Femenino
Hola PabloN. Muchas gracias.

Ya veo lo de la media. Pero por más que intento sustituir, no llego a lo que tengo que demostrar. He probado a usar las otras fórmulas tanto de la covarianza como de la desviación, para ver si resulta más fácil (aunque sé que ha de salir con las dos). Por muchos cambios que intento hacer, entre sumatorios y esa raíz del denominador, no se parece en nada a la fórmula a la que tengo que llegar. Además para tener un \( d_i^2 \) debería ver algún \( (x_i-y_i)^2 \), a lo que tampoco llego. Llevo desde el jueves pasado intentándolo, estoy empezando a desesperarme  :banghead:

Un saludo y muchas gracias

22 Marzo, 2012, 12:47 am
Respuesta #3

pierrot

  • pabloN
  • Moderador Global
  • Mensajes: 3,447
  • País: uy
  • Karma: +0/-0
  • Sexo: Masculino
Hola Gaussa

Cometí errores en mi mensaje anterior, por eso borré gran parte de lo que decía :'(. Perdón. Lo que escribo a continuación es más bien para yo tenerlo presente (y no confundirme) que para otra cosa. No es que crea que no lo sabes ni nada por el estilo, al contrario ¡lo debes tener mucho más claro que yo!

Spoiler
Se define el coeficiente de correlación de dos variables aleatorias \( X \) e \( Y \) tales que \( 0<\mathbb{VAR}(X)<\infty \) y \( 0<\mathbb{VAR}(Y)<\infty \) mediante

\( \displaystyle \rho=\frac{\mathbb{COV}(X,Y)}{\sqrt{\mathbb{VAR}(X)}\sqrt{\mathbb{VAR}(Y)}} \)

Si \( (X_n)_{n\in \mathbb{N}} \) e \( (Y_n)_{n\in \mathbb{N}} \) son muestras iid, tales que \( 0<\mathbb{VAR}(X_1)=\mathbb{VAR}(X)<\infty \) y \( 0<\mathbb{VAR}(Y_1)=\mathbb{VAR}(Y)<\infty \) se puede definir el siguiente estimador para el coeficiente de correlación:

\( \rho_n=\displaystyle \frac{1}{n}\frac{\sum_{i=1}^n (X_i-\bar{X}_n)(Y_i-\bar{Y}_n)}{\sigma_n(X)\sigma_n(Y)} \)

donde \( \sigma_n^2(X)=\displaystyle \frac{1}{n}\sum_{i=1}^n(X_i-\bar{X}_n)^2 \) y de la misma manera con \( \sigma_n^2(Y) \). Se prueba (usando la ley fuerte de los grandes números) que el anterior es un estimador consistente, o sea, que \( P(\displaystyle \lim_n\ \rho_n=\rho)=1 \). De la misma manera que, por ejemplo, el promedio es un estimador consistente de la esperanza. Aquí es igual.
[cerrar]

Basados en lo que está en el Spoiler, el estadístico de Spearman entre dos vectores \( x \) e \( y \) se define como el estimador anterior aplicado a dichas muestras, es decir

\( S(x,y):=\displaystyle \frac{\displaystyle \sum_{i=1}^n(x_i-\bar{x})(y_i-\bar{y})}{\displaystyle \sqrt{\sum_{i=1}^n (x_i-\bar{x})^2\sum_{i=1}^n(y_i-\bar{y})^2}} \)

Observa que en la fórmula anterior fue donde me equivoqué yo. Cuando empecé a hacer las cuentas vi que algo andaba mal. Así sí tiene sentido pues \( \displaystyle \frac{1}{n}\sum_{i=1}^n(x_i-\bar{x})(y_i-\bar{y})=\frac{1}{n}\sum_{i=1}^nx_iy_i-\bar{x}\bar{y} \) (y se puede aplicar la ley fuerte de los grandes números para asegurar que eso tiende casi seguramente con \( n \) a la covarianza).

Ahora bien, dada una muestra \( x=(x_1,x_2,\cdots,x_n) \) se puede definir el rango de \( x_i \) que denotaremos \( r(x_i) \) como el lugar que ocupa el dato \( x_i \) en la muestra ordenada de menor a mayor. De esta forma, dado el vector \( x=(x_1,x_2,\cdots,x_n) \) podemos construir un vector de rangos \( r_x=\big(r(x_1),r(x_2),\dots, r(x_n)\big) \) que nos indique a qué posición de la muestra ordenada corresponde cada observación de la muestra original. En ausencia de empates (como es el caso) debe cumplirse \( r(x_i)\in \{1,2,\dots, n\} \) y además \( r(x_i)\neq r(x_j)\ \forall i\neq j \).

Dicho todo ésto, ya estamos en condiciones de definir el coeficiente de correlación por rangos de Spearman \( r_S \). Dadas las muestras \( x=(x_1,x_2,\cdots, x_n) \) e \( y=(y_1,y_2,\cdots, y_n) \) consideramos los correspondientes vectores de rangos \( r_x=\big(r(x_1),r(x_2),\dots, r(x_n)\big) \) y \( r_y=\big(r(y_1),r(y_2),\dots, r(y_n)\big) \) como en el párrafo anterior, y definimos:

\( r_S=S(r_x,r_y):=\displaystyle \frac{\displaystyle \sum_{i=1}^n\big(r(x_i)-\bar{r_x}\big)\big(r(y_i)-\bar{r_y}\big)}{\displaystyle \sqrt{\sum_{i=1}^n \big(r(x_i)-\bar{r_x}\big)^2\sum_{i=1}^n\big(r(y_i)-\bar{r_y}\big)^2}} \)

Por lo tanto, lo que hay que probar es que:

\( \displaystyle \frac{\displaystyle \sum_{i=1}^n\big(r(x_i)-\bar{r_x}\big)\big(r(y_i)-\bar{r_y}\big)}{\displaystyle\sqrt{\sum_{i=1}^n \big(r(x_i)-\bar{r_x}\big)^2\sum_{i=1}^n\big(r(y_i)-\bar{r_y}\big)^2}}=1-\displaystyle\frac{6\displaystyle\sum_{i=1}^n{d_i^2}}{n(n^2-1)} \)

donde \( d_i=r(x_i)-r(y_i) \).

Bueno, ya sabemos que \( \bar{r_x}=\bar{r_y}=\displaystyle\frac{1}{n}\sum_{i=1}^ni=\frac{n+1}{2} \). Calculamos ahora:

\( {\displaystyle \sum_{i=1}^n \big(r(x_i)-\bar{r_x}\big)^2=\sum_{i=1}^n{\red \Big(} r(x_i)^2-2r(x_i)\bar{r_x}+\bar{r_x}^2{\red \Big)}=\sum_{i=1}^n r(x_i)^2-2\bar{r_x}\sum_{i=1}^n r(x_i)+n\bar{r_x}^2=\sum_{i=1}^n i^2-2n\left(\frac{n+1}{2}\right)^2+n\left(\frac{n+1}{2}\right)^2=\frac{n^3-n}{12}} \).

Observa que como \( {\bar{r_x}=\bar{r_y} \) también se cumple \( \displaystyle \sum_{i=1}^n \big(r(y_i)-\bar{r_y}\big)^2=\displaystyle \frac{n^3-n}{12}} \).

Ahora bien, para saber cuánto vale el numerador empieza por plantear \( {\displaystyle \sum_{i=1}^n d_i^2=\sum_{i=1}^n \big(r(x_i)-r(y_i)\big)^2=\sum_{i=1}^n \big((r(x_i)-\bar{r_x}){\red -}(r(y_i)-\bar{r_y})\big)^2=\sum_{i=1}^n(r(x_i)-\bar{r_x})^2-2\sum_{i=1}^n(r(x_i)-\bar{r_x})(r(y_i)-\bar{r_y})+\sum_{i=1}^n (r(y_i)-\bar{r_y})^2} \). Despeja \( \displaystyle \sum_{i=1}^n(r(x_i)-\bar{r_x})(r(y_i)-\bar{r_y})  \) y sustituye las demás expresiones por las que calculamos antes (que ya están en términos de \( n \)).

Fíjate a ver si ahora no te sale. Yo no he terminado aún de hacer las cuentas.

Saludos
$_="loe  hnachaPkr erttes,urJ";$j=0;for($i=0;s/(.)(.{$j})$//;$i++){$_=$2.$_,$j+=1-$i%2,print$1}print

22 Marzo, 2012, 01:21 am
Respuesta #4

Gaussa

  • $$\Large \color{#5b61b3}\pi\,\pi\,\pi\,\pi\,\pi$$
  • Mensajes: 1,551
  • Karma: +1/-0
  • Sexo: Femenino
Hola PabloN.

Muchísimas gracias por todo lo que me estás ayudando. Lo estás explicando muy bien.

Cometí errores en mi mensaje anterior, por eso borré gran parte de lo que decía :'(. Perdón.

No te preocupes  ;). Me di cuenta después de escribir el mensaje. Con lo que habías puesto me salía que valía 1.

Esta parte no la comprendo \( \sum_{i=1}^n r(x_i)^2-2r(x_i)\bar{r_x}+\bar{r_x}^2=\sum_{i=1}^n r(x_i)^2-2\bar{r_x}\sum_{i=1}^n r(x_i)+n\bar{r_x}^2 \), por qué se multiplica por \( n \)

Y esta igualdad tampoco la llego a ver del todo \( \sum_{i=1}^n \big(r(x_i)-r(y_i)\big)^2=\sum_{i=1}^n \big((r(x_i)-\bar{r_x})+(r(y_i)-\bar{r_y})\big)^2 \)

Puede que sea porque es muy tarde por aquí, y después de pasarme todo el día estudiando no estoy pensando bien.

Ahora me tengo que acostar. Mañana en cuanto que llegue de la Universidad sigo con la demostración.

Un saludo y muchas gracias de nuevo.

22 Marzo, 2012, 03:27 am
Respuesta #5

pierrot

  • pabloN
  • Moderador Global
  • Mensajes: 3,447
  • País: uy
  • Karma: +0/-0
  • Sexo: Masculino
Esta parte no la comprendo \( \sum_{i=1}^n r(x_i)^2-2r(x_i)\bar{r_x}+\bar{r_x}^2=\sum_{i=1}^n r(x_i)^2-2\bar{r_x}\sum_{i=1}^n r(x_i)+n\bar{r_x}^2 \), por qué se multiplica por \( n \)

Y esta igualdad tampoco la llego a ver del todo \( \sum_{i=1}^n \big(r(x_i)-r(y_i)\big)^2=\sum_{i=1}^n \big((r(x_i)-\bar{r_x})+(r(y_i)-\bar{r_y})\big)^2 \)

¡Perdón! Tuve una errata en un signo, y unos paréntesis que me olvidé. A ver ahora si se entiende...

Saludos
$_="loe  hnachaPkr erttes,urJ";$j=0;for($i=0;s/(.)(.{$j})$//;$i++){$_=$2.$_,$j+=1-$i%2,print$1}print

22 Marzo, 2012, 06:56 pm
Respuesta #6

Gaussa

  • $$\Large \color{#5b61b3}\pi\,\pi\,\pi\,\pi\,\pi$$
  • Mensajes: 1,551
  • Karma: +1/-0
  • Sexo: Femenino
Hola.

Muchas gracias PabloN. Sustituyendo sale perfectamente. Pensé que nunca vería hecha esta demostración, estoy muy contenta.

 Sólo me queda una cosa por entender

\( \sum_{i=1}^n r(x_i)^2-2r(x_i)\bar{r_x}+\bar{r_x}^2=\sum_{i=1}^n r(x_i)^2-2\bar{r_x}\sum_{i=1}^n r(x_i)+n\bar{r_x}^2 \)

No veo por qué se multiplica por n (sé que es así, pero no lo entiendo).

Saludos.

23 Marzo, 2012, 12:38 am
Respuesta #7

pierrot

  • pabloN
  • Moderador Global
  • Mensajes: 3,447
  • País: uy
  • Karma: +0/-0
  • Sexo: Masculino
Hola.

Muchas gracias PabloN. Sustituyendo sale perfectamente. Pensé que nunca vería hecha esta demostración, estoy muy contenta.

 Sólo me queda una cosa por entender

\( \sum_{i=1}^n r(x_i)^2-2r(x_i)\bar{r_x}+\bar{r_x}^2=\sum_{i=1}^n r(x_i)^2-2\bar{r_x}\sum_{i=1}^n r(x_i)+n\bar{r_x}^2 \)

No veo por qué se multiplica por n (sé que es así, pero no lo entiendo).

Saludos.

Hola Gaussa

¡Me alegro que te haya servido mi ayuda! Es porque omití un paso, sólo en esa sumatoria :'(. No fui muy coherente. En realidad debió ser:

\( \displaystyle \sum_{i=1}^n\Big( r(x_i)^2-2r(x_i)\bar{r_x}+\bar{r_x}^2 \Big)=\sum_{i=1}^nr(x_i)^2-2\bar{r_x}\sum_{i=1}^nr(x_i)+\sum_{i=1}^n\bar{r_x}^2 \)

Pero \( \displaystyle \sum_{i=1}^n\bar{r_x}^2=\underbrace{\bar{r_x}^2+\bar{r_x}^2+\cdots+\bar{r_x}^2}_{\textrm{$n$ veces}}=n\cdot \bar{r_x}^2 \)

Saludos

PD. Una aplicación muy conocida del coeficiente de correlación por rangos de Spearman es usarlo como estadístico de un test de aleatoriedad, es decir, para determinar si es o no una muestra iid. En dicho caso se compara el vector de rangos de la muestra, o sea, \( \big(r(x_1),r(x_2),\cdots, r(x_n)\big) \) con un vector de índices \( (1,2,\cdots, n) \). Fijate que la interpretación de \( r_S \) en dicho caso es detectar la presencia de tendencias crecientes o decrecientes en la muestra. Si todos los datos van creciendo, o bien decreciendo, es de esperar que en realidad no sean independientes. Bueno, si \( r(x_i)=i \) (o sea, si el orden de la muestra ordenada coincide con el de la original) \( r_S \) nos debiera dar 1. Si por el contrario, \( r(x_i)=n+1-i \), debiera cumplirse \( r_S=-1 \). Corrobora que eso pasa con la definición anterior de \( r_S \). Esa es otra forma de "deducir" la fórmula.
$_="loe  hnachaPkr erttes,urJ";$j=0;for($i=0;s/(.)(.{$j})$//;$i++){$_=$2.$_,$j+=1-$i%2,print$1}print

25 Marzo, 2012, 04:39 pm
Respuesta #8

Gaussa

  • $$\Large \color{#5b61b3}\pi\,\pi\,\pi\,\pi\,\pi$$
  • Mensajes: 1,551
  • Karma: +1/-0
  • Sexo: Femenino
Muchas gracias PabloN, me lo has explicado muy bien.

Saludos.