Guía · Experimentos
Prueba un cambio de clasificación antes de que lo vean todos.
Un conjunto de sinónimos o un nuevo impulso puede mejorar una consulta y empeorar discretamente otras cincuenta. Un experimento divide el tráfico real entre dos perfiles guardados y deja que decidan los números.
Configúralo bien
Dos perfiles, un cambio
El control es tu perfil actual y la variante es una copia con exactamente un cambio. Dos cambios a la vez no te dicen nada.
Persistente por visitante
La asignación es determinista según el identificador del visitante, de modo que una persona no salta entre variantes y la comparación mide la clasificación, no el ruido.
Comprueba primero sin tráfico
Ejecuta el conjunto de referencia contra el perfil de la variante. Si el nDCG baja, no tiene sentido gastar tráfico.
Interpreta el resultado
Métrica principal
Conversión desde la búsqueda o clics por búsqueda, decidida antes de empezar. Elegir la métrica después siempre encuentra un ganador.
Semanas completas
El tráfico de los días laborables y el del fin de semana se comportan de forma distinta; detén la prueba al cerrar una semana, no cuando el gráfico se vea bien.
Promover o revertir
Promover convierte la variante en el perfil predeterminado; revertir termina el experimento sin ningún cambio.
Cómo empezar
- 1
Crea el experimento
Elige el índice, los perfiles de control y de variante y la proporción de tráfico.
POST /api/v1/experiments?index=products { "name": "Boost new arrivals", "controlProfileId": "prof_default", "treatmentProfileId": "prof_boost_new", "treatmentWeight": 50, "status": "running" } - 2
Inícialo y espera
Las búsquedas sin un perfil explícito se asignan automáticamente; el informe compara clics y conversiones por variante.