Probar dentro de un sistema que decide quién ve qué
Por qué la asignación no es neutral, cómo se construye un grupo de control, cuánto volumen hace falta y qué diseños siguen siendo viables.
Por qué un test dentro de un sistema de recomendación es más difícil de lo que parece
Comparar dos versiones parece sencillo hasta que el propio sistema decide quién ve qué. Los cuatro mecanismos que rompen la comparación y qué queda en pie.
Experimentos · 13 minGrupos de control y qué se puede aislar de verdad
Un grupo de control es la única forma de estimar un efecto. Cómo se construye cuando no se puede asignar al azar, qué lo invalida y qué preguntas puede responder.
Experimentos · Diseño · 13 minOrden de publicación, arrastre y contaminación entre piezas
Las piezas de una misma cuenta no son observaciones independientes. Qué efectos arrastra una publicación sobre la siguiente y cómo se diseña el calendario para no confundirlos con resultados.
Experimentos · Calendario · 13 minPotencia estadística y las pruebas que no la tienen
La mayoría de las pruebas de contenido no tienen volumen para detectar el efecto que buscan. Qué es la potencia, por qué se calcula antes y qué significa un resultado sin ella.
Experimentos · Estadística · 13 minPruebas de creatividad que sí se pueden hacer en vídeo vertical
Después de todas las objeciones, queda un conjunto de comparaciones viables. Cuáles son, qué exigen y qué se puede afirmar con cada una.
Experimentos · Práctica · 13 minEl boletín
Un envío cada quincena: lo publicado, una definición revisada y una nota de trabajo. Sin medias de sector, sin tasas de referencia y sin casos que no podamos acreditar. Baja cuando quieras.
Tratamos tu dirección sólo para el envío. Detalles en privacidad.