La forma honesta de probar la prueba social es dividir por visitante, de modo que la mitad vea el widget y la otra mitad no, medir sobre pedidos completados, dejarla correr al menos dos ciclos semanales completos y escribir la métrica de éxito y la regla de parada antes de empezar. Todo lo demás en este artículo es el detalle de esos cuatro requisitos y de las formas en que una prueba de este tipo tiende a darse la razón a sí misma.
Por qué es fácil equivocarse al probar la prueba social
Los widgets de prueba social son pequeños, baratos de activar, y el panel del proveedor suele mostrar un número halagador. Es la receta perfecta para el razonamiento interesado. Las trampas concretas:
- Medir los clics en la notificación en lugar de los pedidos. Los clics son interacción, no ingresos.
- Comparar antes y después en lugar de grupos simultáneos. La estacionalidad, el envío de una newsletter o un cambio de precio taparán el efecto.
- Leer una métrica de "asistido" o "influenciado" como mejora. Un comprador que vio una notificación antes de comprar muchas veces habría comprado igual.
- Parar cuando pinta bien. Mirar los resultados a mitad y parar antes de tiempo dispara los falsos positivos.
- Cambiar la frecuencia a mitad de la prueba. Entonces estás probando dos cosas.
El panel de Provedly muestra los pedidos asistidos por la prueba social, es decir, el número de pedidos en los que el comprador vio una notificación antes de comprar, emparejados por ID de visitante dentro de una ventana de 30 días. Lo mostramos como un conteo, nunca como una mejora modelada o estimada, precisamente porque no es una cifra de mejora. Te dice cuántos compradores estuvieron expuestos. No te dice cuántos compraron por eso. Para eso necesitas un grupo de control. En /es/blog/measuring-proof-assisted-orders explicamos qué significa la métrica y qué no.
Cómo diseñar la prueba
Divide por visitante, no por página. Asigna cada visitante a A o B en su primera llegada y mantenlo ahí durante toda la prueba, también entre sesiones dentro de la ventana de 30 días. Las divisiones por página o por sesión tienen fugas: un visitante ve el widget el martes, está en el grupo de control el jueves y compra.
La segmentación por dispositivo y por URL de Provedly sirve para acotar dónde aparece el widget, no para dividir el tráfico. Usa tu herramienta de experimentación, las pruebas nativas de tu plataforma o una simple marca en una cookie que decida si se carga la etiqueta script. En las tiendas Shopify, el app embed del tema puede depender de un ajuste del tema si tu herramienta de pruebas admite variantes a nivel de tema.
Decide la métrica primero. Escríbela: tasa de conversión a pedido completado, por visitante, durante el periodo de la prueba. Las métricas secundarias pueden incluir el valor medio del pedido y los ingresos por visitante. No uses como métricas principales los clics en la notificación, el tiempo en la página ni la profundidad de scroll; se mueven con facilidad y significan poco.
Decide la regla de parada primero. Elige la duración, o el tamaño de muestra, antes de empezar. Dos semanas completas es el mínimo para la mayoría de las tiendas, porque el comportamiento entre semana y en fin de semana es distinto. Cuatro es mejor. Si usas una calculadora de tamaño de muestra, te dirá cuántos visitantes por grupo necesitas para detectar el efecto que te interesa; para un efecto pequeño en un sitio modesto, la respuesta honesta muchas veces es "más de los que tienes", y es mejor saberlo que hacer una prueba sin potencia suficiente y sobreinterpretarla.
Mantén todo lo demás igual. Nada de cambios de frecuencia, barras nuevas ni ediciones de textos durante la prueba. Si tienes que cambiar algo, empieza de nuevo.
Qué probar
La prueba de encendido/apagado es la primera que hay que hacer. Después, las preguntas interesantes tienen más que ver con la contención que con la intensidad.
| Prueba | A | B | Qué aprendes |
|---|---|---|---|
| Encendido/apagado | Sin widget | Notificaciones, límites por defecto | Si la prueba social ayuda o no |
| Frecuencia | Límite de 5 por sesión | Límite de 2 por sesión | Si con menos se consigue lo mismo |
| Alcance | Todas las páginas | Solo páginas de producto | Dónde importa la prueba social |
| Verificación | Notificaciones con enlace de "Compra verificada" | Notificaciones sin él (no es posible en Provedly) | Ver abajo |
La última fila está ahí para dejar algo claro. No puedes hacer esa prueba en Provedly, porque la marca de verificado y su enlace a la página de verificación pública no son opcionales. Confiamos lo suficiente en el valor de una afirmación comprobable como para no tratarla como una variable, y la dirección regulatoria desde la norma de la FTC de finales de 2024 sobre testimonios falsos sugiere que la alternativa tampoco es una opción a largo plazo.
Cómo leer el resultado
Si B gana a A por un margen que tu regla de parada acepta, tienes un resultado. Informa las tasas de conversión absolutas, la diferencia relativa y el intervalo de confianza, no solo "un 12 por ciento de mejora". Una cifra relativa sin la tasa base es la manera en que los efectos pequeños se exageran.
Si el resultado es plano, eso también es información. Puede significar que tu producto no necesita el empujón, o que tu tráfico es sobre todo de compradores que vuelven y ya confían en ti. Baja el widget a un límite bajo solo en las páginas de producto y sigue adelante.
Si B pierde, créetelo. Los widgets pueden molestar, sobre todo en móvil, y en /es/blog/mobile-social-proof-design tienes los cambios de diseño que conviene probar antes de repetir la prueba.
Cómo contrastar con los pedidos asistidos
Durante la prueba, el conteo de pedidos asistidos por la prueba social del panel solo se aplica al grupo B, ya que A no vio nada. Una comprobación útil: si la prueba muestra que B convierte mejor, el conteo de pedidos asistidos debería ser una parte significativa de los pedidos de B. Si B gana pero casi nadie en B vio realmente una notificación antes de comprar, está pasando otra cosa y deberías desconfiar de tu división.
Cómo probar una barra de cuenta regresiva
Las barras son más difíciles de probar con honestidad porque una cuenta regresiva con una fecha de fin real está ligada a una oferta, y la oferta en sí mueve la conversión. Prueba la presencia de la barra, no la oferta: ambos grupos tienen la rebaja y solo B tiene la barra. Déjala durante todo el periodo de la oferta. En /es/blog/honest-countdown-timers se explican los tipos de barra y cuáles sirven para esto.
Preguntas frecuentes
¿Provedly puede dividir el tráfico por mí?
No. Provedly acota dónde y a quién se muestra el widget, pero la asignación aleatoria debería estar en una herramienta cuyo trabajo sea la experimentación, para que la división sea independiente de lo que se está probando.
¿Cuántos pedidos necesito para que una prueba signifique algo?
Depende de tu tasa base y del tamaño del efecto que te interesa. Una calculadora de tamaño de muestra te dará un número; si son más pedidos de los que esperas en un mes, deja la prueba más tiempo o acepta que buscas una señal orientativa y no una demostración.
¿Los "pedidos asistidos por la prueba social" son lo mismo que la mejora que aporta el widget?
No. Es un conteo de compradores que vieron antes una notificación. La mejora requiere un grupo de control, que es lo que describe este artículo.
Configura un widget con los límites por defecto y haz una prueba honesta de encendido/apagado; empieza en /register.