Tip:
Highlight text to annotate it
X
Vídeo 5: Experimentos de campaña de AdWords: comprender los resultados y la relevancia estadística de los experimentos
Durante el tercer paso de la configuración del Experimento de campaña, ejecutó el experimento
y supervisó los resultados. Esta lección le ayudará a entender parte de los resultados
que obtenga durante el experimento.
Mientras se ejecuta el experimento de campaña, verá que se acumulan datos en las divisiones de
control y de experimento para la campaña, los grupos de anuncios y las palabras clave. Recuerde:
si en alguna pestaña aún no aparece una fila de control y otra de experimento, puede activarlas
haciendo clic en "Segmento" y luego en la opción "Experimento".
Según se acumulan resultados, en la interfaz aparecen varios tipos de indicadores de
relevancia estadística, que le ayudarán a comprender si los valores que está comparando
son equiparables o no.
Las diferencias estadísticamente relevantes son las que difícilmente podrían ser fortuitas.
Si un valor no cambia en una proporción estadísticamente relevante, es posible que
no le haya afectado el cambio experimental.
La flecha de doble sentido significa que el valor no ha sufrido ningún cambio estadísticamente
relevante. Cualquier diferencia que observe será probablemente "ruido" experimental.
La flecha ascendente significa que el valor ha sufrido un incremento estadísticamente
relevante. Si aplicara los cambios experimentales a todas las subastas, cabría esperar que
este valor aumentara.
La flecha descendente significa que el valor ha sufrido una disminución estadísticamente
relevante. Si aplicara los cambios experimentales a todas las subastas, cabría esperar que
este valor se redujera.
Estos iconos tienen, además, tres niveles que indican cuántas probabilidades hay de
que los resultados sean fruto de los cambios experimentales y no del azar:
una sola flecha ascendente o descendente significa que hay un 95% de probabilidades de que el valor
haya aumentado o disminuido. Es decir, que según las estadísticas, al aplicar íntegramente
los cambios experimentales, solo habría un 5% de posibilidades de que el valor no evolucionara
en el mismo sentido, sin tocar nada más.
La doble flecha ascendente o descendente significa que hay un 99% de probabilidades de que el valor
haya aumentado o disminuido. Es decir, que según las estadísticas, al aplicar íntegramente
los cambios experimentales, solo habría un 1% de posibilidades de que el valor no evolucionara
en el mismo sentido, sin tocar nada más.
La triple flecha ascendente o descendente significa que hay un 99,9% de probabilidades de que el valor
haya aumentado o disminuido. Es decir, que según las estadísticas, al aplicar íntegramente
los cambios experimentales, solo habría un 0,1% de posibilidades de que el valor no evolucionara
en el mismo sentido, sin tocar nada más.
Tenga en cuenta que si ejecuta un experimento con divisiones de experimento y de control cuyo tamaño
no sea 50/50 (por ejemplo, 70/30 o 20/80), las estadísticas que la campaña acumule
en dichas divisiones no podrán compararse entre sí. Por ejemplo, supongamos que
está ejecutando un experimento de 90/10. Si no ha cambiado nada en él, es de suponer
que por cada 900 impresiones registradas en la división de control, se registrarán 100 en la de
experimento. Por tanto, si registrara 900 impresiones en la división de control y 400 en la de
experimento, significaría que las impresiones han sufrido un aumento estadísticamente relevante
(ya que 400 es una cantidad muy superior a las 100 impresiones previstas en caso de no
haber cambiado nada, lo que implica que al aplicar los cambios, las impresiones deberían aumentar),
a pesar de que el valor nominal de 900 es mayor que el de 400.
Las divisiones 50/50 se comparan más fácilmente (pues los números absolutos deberían ser iguales
si los cambios no influyen) y muchas campañas no tienen un volumen de tráfico suficiente como
para extrapolar conclusiones satisfactorias a grupos que no sean 50/50. Recomendamos
pues a los anunciantes que ejecuten experimentos 50/50, salvo a aquellos que sepan cómo calcular
por su cuenta el valor porcentual que implicaría la aplicación de los cambios experimentales
a todas las subastas.