Qué es exactamente
Una línea base no es un número. Es un conjunto de series de tu propia cuenta, con sus definiciones y su periodo, que describe cómo se comporta habitualmente el sistema con lo que publicas cuando no estás haciendo nada especial.
Contiene, como mínimo, la distribución de reproducciones por pieza, la forma típica de la curva de retención por tramo de duración, la proporción de cada tipo de interacción sobre una base declarada y la variabilidad de todo lo anterior. Esa última parte, la variabilidad, es la que casi siempre falta y la más importante.
Sin conocer la variabilidad habitual no se puede saber si una diferencia es un resultado o una fluctuación. Es la misma razón por la que un termómetro sin escala no informa: el valor sólo significa algo dentro de un rango conocido.
Conjunto de series propias que describe el comportamiento habitual de una cuenta durante un periodo sin intervención, con las definiciones de cada métrica fijadas y fechadas.
No es un objetivo. No es una media de sector. No es un número único. No sirve si se ha construido durante una campaña, porque en ese caso mide el efecto que se quería aislar.
Para que sirva de referencia tendría que ser cierto que el periodo de medición no incluyó intervenciones, que las definiciones no cambiaron y que la variabilidad registrada es representativa de la operación normal.
Cuánto tiempo hace falta
No existe una respuesta universal y sí un criterio: hace falta el tiempo suficiente para que la variabilidad se estabilice, es decir, para que añadir más observaciones deje de cambiar la impresión sobre el rango habitual.
Ese criterio se comprueba mirando: se calcula el rango con las primeras observaciones, después con más, y se observa cuándo deja de moverse. Es una comprobación empírica y no requiere ninguna fórmula.
Lo que sí se puede decir con seguridad es qué no basta. Una semana no basta porque no cubre un ciclo semanal completo. Un mes con una única pieza excepcional no basta porque esa pieza domina el rango. Y una línea base construida durante una campaña no es una línea base: es una medición del efecto que se quería aislar.
Las cuatro condiciones de una línea base utilizable
Sin intervención. Durante el periodo no se cambia la estrategia, no se invierte en amplificación y no se altera el calendario. Cualquier intervención convierte la línea base en una medición de esa intervención.
Con definiciones fijadas. Se anota qué versión de cada métrica se está usando y en qué fecha se consultó su definición. Si la plataforma la cambia después, la línea base queda partida y hay que decirlo.
Con la variabilidad registrada. No sólo el valor central sino el rango, y preferiblemente la distribución completa, por las razones que se explican en medianas, percentiles y el problema de la media.
Estratificada. Por tramo de duración y por formato, porque una línea base agregada sobre formatos distintos describe una mezcla que no volverá a repetirse en la misma proporción.
| Componente | Por qué | Error si falta |
|---|---|---|
| Valor central por métrica | Punto de referencia | No hay contra qué comparar |
| Rango de variabilidad | Distinguir señal de ruido | Se celebran fluctuaciones |
| Estratificación por duración | La duración contamina todo | Se compara formato con formato distinto |
| Definiciones fechadas | Las plataformas las cambian | La serie se rompe sin aviso |
| Periodo sin intervención | Aislar el comportamiento normal | Se mide el efecto que se quería aislar |
Ordenación de definiciones, no de resultados. Ninguna celda contiene una cifra, porque este cuadro clasifica lo que cada término designa.
Por qué casi nadie la tiene
Las razones son organizativas antes que técnicas y conviene nombrarlas porque son las mismas en casi todas partes.
La medición se activa con la campaña. El presupuesto de analítica se aprueba junto al de la acción, de modo que el instrumento se enciende cuando el fenómeno ya está en marcha. Es el equivalente a instalar el termómetro cuando ya ha subido la fiebre.
Nadie quiere pagar por un periodo sin resultados. Medir sin actuar durante semanas parece tiempo perdido, sobre todo cuando el calendario de negocio empuja. La factura llega después, en forma de resultados que no se pueden interpretar.
Las definiciones cambian. Una línea base construida hace dos años puede ser inutilizable hoy porque la plataforma redefinió sus métricas. Mantenerla exige revisiones periódicas que nadie asigna a nadie.
Se confunde con un objetivo. Cuando la dirección ve la línea base, la tentación es convertirla en el mínimo aceptable. En cuanto eso ocurre, deja de ser una referencia neutral y empieza a haber incentivos para que salga baja.
- Las series propias medidas durante el periodo sin intervención
- El rango de variabilidad observado en esas series
- La fecha de consulta de cada definición de métrica
- Que un resultado fuera del rango habitual merece investigarse
- Que la línea base envejece cuando cambian las definiciones
- Que una única pieza excepcional puede dominar el rango si el periodo es corto
- Que una media de sector puede sustituir a una línea base propia
- Que la línea base es un objetivo mínimo aceptable
- Que un mes de datos basta siempre
Convertir la línea base en objetivo la destruye como instrumento: en cuanto hay incentivo para que salga baja, deja de describir la operación normal.
Reconstruir una línea base tarde
Si la campaña ya empezó, hay dos salidas parciales y ninguna equivalente a haberla medido antes.
La primera es usar el histórico anterior, si existe, aceptando que las definiciones pueden haber cambiado y que el sistema de recomendación no es el mismo. Se usa como referencia orientativa y se declara.
La segunda es medir una línea base en paralelo sobre un segmento que no recibe la intervención, cuando eso es posible. Es la lógica del grupo de control y tiene sus propias dificultades en superficies de recomendación, que se detallan en grupos de control y qué se puede aislar de verdad.
Lo que no es una salida es inventar la referencia a partir de cifras de sector. Una línea base ajena, construida con otras definiciones, sobre otra cuenta y en otro periodo, no describe tu cuenta y usarla produce conclusiones peores que no tener ninguna referencia.
Lo que conviene llevarse
La línea base es el requisito previo de cualquier afirmación sobre resultados. Sin ella, sólo se puede comparar contra expectativas, que es comparar contra opiniones.
Exige medir antes de actuar, registrar la variabilidad y no sólo el valor central, y mantenerla viva cuando cambian las definiciones. Es trabajo poco lucido y es la diferencia entre medir y aparentar que se mide.