Mostrando las entradas con la etiqueta a/b testing. Mostrar todas las entradas
Mostrando las entradas con la etiqueta a/b testing. Mostrar todas las entradas

domingo, septiembre 29, 2024

La Experimentación: La Clave para el Aprendizaje y la Innovación en las Organizaciones

Imagen generada con DALL-E


Hola a todos,

En muchas organizaciones, se realizan experimentos, pero no siempre de manera rigurosa. Se prueban ideas, pero sin medir adecuadamente los resultados, y los fracasos, en lugar de verse como oportunidades de aprendizaje, se consideran decepciones. Un proyecto que creemos que va a tener mucho beneficio, es un experimento (sin importar si lo ejecutaste con metodología adaptativa o predictiva, es decir, ágil o cascada), una funcionalidad interesante en un producto, adoptar una metodología nueva de trabajo, o una tecnología, un nuevo proceso de negocio; son experimentos en sí, cuya incertidumbre solo se resuelve al contacto con la realidad.


Pero ¿Qué es un Experimento?

Jeff Bezos lo define con claridad: “Si sabes el resultado, no es un experimento”. La experimentación implica probar una hipótesis sin saber su desenlace, con la intención de aprender. Muchas organizaciones evitan estos ensayos por miedo al fracaso, o declaran predictiblidad y resultados fijos donde no se van a obtener, pero es precisamente el fracaso lo que puede conducir a un mayor aprendizaje. Según la RAE, experimentar es: "hacer operaciones destinadas a descubrir, comprobar o demostrar determinados fenómenos o principios científicos.", es allí donde esta la ganancia, en descubrir el comportamiento de un fenómeno dado.


Experimentación y Aprendizaje

Un experimento, tanto si tiene éxito como si fracasa, proporciona información valiosa. Un resultado fallido muestra qué caminos no seguir, mientras que un resultado exitoso indica dónde enfocar los esfuerzos. Esta capacidad para reducir la incertidumbre es crucial en entornos complejos. Thomas Edison, quien realizó miles de experimentos antes de inventar la bombilla, decía: “No he fracasado, he encontrado 10,000 maneras que no funcionan”.


El Valor de Experimentar Más

Existen dos reglas sencillas en el mundo de la experimentación:
  • Si experimentas poco, aprendes poco: Las organizaciones que solo realizan unos pocos experimentos al año tienen menos oportunidades de aprender y ajustar su estrategia.
  • Si experimentas mucho, aprendes mucho: Al realizar más experimentos, se multiplican las oportunidades de descubrir qué funciona y qué no.

Imagina una organización que realiza solo 10 experimentos al año, y solo uno de ellos es exitoso. Esto significa que, de 10 posibles oportunidades de aprendizaje, solo una les permitió avanzar significativamente hacia un mejor conocimiento del mercado, del cliente o del área que estaban investigando.

Ahora, imagina otra organización que realiza 1000 experimentos en un año, con la misma tasa de éxito del 10%. Esto significa que de 1000 aprendizajes, de 100 experimentos les proporcionó un avance que multiplica exponencialmente su conocimiento y comprensión del entorno. Veamos una lista de experimentos al año de algunas organizaciones: 

Empresa Número de Experimentos por Año
Amazon Más de 2,000 - Año 2016 (1).

Nota: Hoy en día, pueden ser cientos de miles más, pues la plataforma de A/B testing se ha abierto a los e-commerce que venden sus productos Amazon.com. (15)
Facebook Más de 10,000 - Año 2016 (1) 
Netflix Más de 1,000 - Año 2016 (1) 
P&G Más de 10,000 - Año 2016 (1) 
Booking Más de 25,000 - Año 2022 (2) 
Google Más de 800,000 - Año 2022 (7) 

Empresas como Amazon, Google, y Booking.com han integrado la experimentación en su cultura. La retroalimentación obtenida de estos experimentos les permite mejorar continuamente sus productos y servicios. Además del sector de la tecnología, existen otros donde la experimentación es parte de su crecimiento y cultura: médico, farmacéutico, automotriz, aeronáutico.

 “Nuestro éxito en Amazon es una función de cuantos experimentos hacemos al año, al mes, a la seman, al día.” -Jeff Bezos.


 

La Experimentación como Interés Compuesto

La experimentación funciona como el interés compuesto: el conocimiento se acumula y los éxitos se suman. Por ejemplo, si 40 experimentos exitosos generan individualmente un 1% de crecimiento en el mercado, el crecimiento acumulado sería del 48.9%. Si realizas 100 experimentos exitosos, cada uno generando un 1% de crecimiento, el crecimiento total acumulado podría alcanzar un 270%, considerando el crecimiento compuesto.

Cada experimento no solo aporta resultados inmediatos, sino que también mejora la comprensión del mercado, del cliente y de los procesos internos. Esto aumenta la eficiencia y la efectividad en la toma de decisiones.

The Surprising Power of Online Experiments - HBR (17)


El Riesgo de No Experimentar

En un entorno de cambio constante, no experimentar es una forma de autosabotaje. Las organizaciones que no fomentan la experimentación de forma disciplinada y sistémica, se aferran a enfoques estáticos, y están condenadas a quedarse atrás, y en consecuencia, desaparecer o volverse reactivas. Como dijo Mark Zuckerberg: “En un mundo que está cambiando realmente rápido, la única estratégica que garantiza fallar es no tomar riesgos”.


Un Imperativo Organizacional

Promover una cultura de experimentación no es opcional; es un imperativo para la supervivencia y el éxito en el mundo moderno. Esto implica medir la cantidad de experimentos, enseñar a todos en la organización cómo diseñarlos y ejecutarlos, registrar los resultados (exitosos o no) y compartir los aprendizajes ya sea en sesiones bimestrales o por un sistema que permita a todos hacer uso de ese aprendizaje individual de manera colectiva.


Cerrando

La experimentación disciplinada es esencial para el aprendizaje organizacional. Las organizaciones deben hacer de la experimentación una métrica clave a monitorear y a incrementar (dependiendo dle contexto o industria, implicará más o menos experimentos), enseñar a sus equipos a diseñar y ejecutar experimentos, y compartir los aprendizajes de manera sistemática. En un mundo que cambia rápidamente, aquellas organizaciones que no se adapten y no fomenten la experimentación quedarán rezagadas.


Saludos ágiles,

Jorge Abad.


Referencias

  1. Liderazgo en la Revolución Digital - Presentación
  2. Building a Culture of Experimentation - HBR
  3. How Managers Can Build a Culture of Experimentation - HBR
  4. Why These Tech Companies Keep Running Thousands Of Failed Experiments - FastCompany
  5. Test AB: conozca 8 casos reales
  6. 65 Ejemplos de cómo ayudan las pruebas A/B a las grandes empresas
  7. Mejorar la Búsqueda con pruebas rigurosas - Google
  8. Optimize product content and increase sales with A/B testing - Amazon
  9. The Power of Amazon A/B Testing: Unlocking E-Commerce Success
  10. Introducción al método "A/B Testing"​ - Roberto Moraga
  11. Lessons from designing Netflix’s experimentation platform - Netflix
  12. Online Controlled Experiments at Large Scale - Paper
  13. Online Experimentation at Microsoft - Microsoft Paper
  14. Despertando la Innovación: De la Experimentación Inconsciente a la Consciente en las Organizaciones
  15. Arquitecturas A/B testing - Pruebas A/B - Amazon
  16. Arquitecturas A/B testing - It’s All A/Bout Testing: The Netflix Experimentation Platform - Netflix
  17. The Surprising Power of Online Experiments- HBR
  18. Large Scale Experimentation at Bing
  19. How To Run 25,000 A/B Tests in 2024

viernes, diciembre 22, 2023

Despertando la Innovación: De la Experimentación Inconsciente a la Consciente en las Organizaciones

Imagen Generada con Bing (1)

En el vertiginoso escenario empresarial contemporáneo, la innovación ha emergido como el elemento esencial para el crecimiento y la viabilidad a largo plazo. A pesar de esta realidad, muchas organizaciones se sumergen en la experimentación de manera inconsciente, desaprovechando así su potencial máximo. Este artículo se aventura a explorar el camino que conduce desde la experimentación inconsciente hasta la consciente, desvelando nuevas oportunidades para la innovación dentro del tejido organizacional.


Comprendiendo la Experimentación Inconsciente:

La experimentación inconsciente se despliega de manera natural en la cotidianidad de las organizaciones. Se manifiesta en pequeñas adaptaciones y ajustes (que se hacen sin saber si serán efectivos o no, requisito obligatorio, para declararlo experimento) que los equipos implementan sin adentrarse en una reflexión profunda, de esta forma, por ensayo y error, van emergiendo nuevas formas de trabajo más eficientes. Un ejemplo claro es la modificación de procesos operativos sin someterlos a una evaluación formal, cambios en la forma de trabajo que comienzan a incrementar gradualmente la distancia entre lo que se definió y lo que se hace; la organización como sistema de sistemas va aprendiendo, pero su registro del "cómo" se hacen las cosas (documentación de procesos), comienza a volverse obsoleto y digno de una "injusta no conformidad" (entrecomillas ciertamente), pues el hacer dista de lo registrado formalmente, tendiendo a ser mejor (en ocasiones tambien puede degradarse, pero no es el camino normalmente elegido). 

Reconociendo la Importancia de la Experimentación Consciente

La experimentación consciente trasciende la casualidad; es un enfoque deliberado y estratégico hacia la prueba y el aprendizaje. Representa la comprensión de que la innovación no es un resultado fortuito, sino el producto de decisiones conscientes y evaluación continua.


Cómo Hacer la Transición

  • Cultivar una Mentalidad de Experimentación: Incentivar la Curiosidad implica fomentar entre los empleados la búsqueda constante de maneras de mejorar e intentar otros caminos algunas veces favorables y otras veces no. También es importante "La Celebración del Fracaso Constructivo", pues de esta manera lo sacamos de su cauce natural de vergüenza o culpa y se convierte en una oportunidad para aprender, un camino más que no sirvió y ajustarse en el futuro.
  • Establecer Procesos de Experimentación Formal: La definición de Objetivos Claros establece metas específicas alineadas con los objetivos organizacionales (recordemos dos máximas del management "Lo que no se mide no se mejora" y "Como me midas me comporto"), compartiendo el mensaje de que es importante experimentar y esta siendo medido; mientras que la Recopilación y Análisis de Datos se convierte en un sistema objetivo para evaluar los resultados.
  • Fomentar la Colaboración y Comunicación: La formación de Equipos Multidisciplinarios enriquece el proceso de experimentación al reunir habilidades y perspectivas diversas. Asimismo, la Canalización de la Retroalimentación crea canales efectivos para recibir comentarios constantes y facilitar la comunicación abierta.

Una buena guía para plasmar los experimentos es el The Experiment Canvas (presentado a continuación) que tuve la oportunidad de apoyar en su creación a mi gran amigo Lucho Salazar, puedes leer el artículo relacionado en el siguiente enlace:  Del miedo al fracaso a ser adicto a la experimentación.



Beneficios de la Experimentación Consciente

  • Mejora Continua y Eficiencia: La Identificación de Ineficiencias permite corregir proactivamente fallas en los procesos, mientras que la Optimización de Recursos, al centrarse en áreas clave, garantiza resultados más efectivos.
  • Desarrollo de una Cultura Innovadora: El Estímulo de la Creatividad, resultado de la experimentación consciente, nutre una cultura donde florece la generación de nuevas ideas. Facilita, además, la Adaptación ágil a Cambios del Mercado, al probar estrategias y enfoques novedosos.
  • Habilitación de Nuevos Caminos para la Generación de Valor: En la experimentación consciente se encuentra, uno de los caminos para la reinvención de las organziaciones a hacia formas diferentes de generación de valor, habilitando a los colaboradores a aportar desde su conocimiento del proceso y de los clientes, a proponer formas alternativas que lleven hacia la evolución gradual empresarial.


Conclusión

La transición de la experimentación inconsciente a la consciente emerge como un paso crucial hacia la innovación sostenible en las organizaciones. Al adoptar un enfoque deliberado hacia la prueba, el aprendizaje y la mejora continua, las organizaciones desatan su potencial innovador, encarando los desafíos empresariales con una mentalidad proactiva y creativa. La experimentación consciente se erige así en el catalizador del crecimiento y la evolución constante en el actual panorama empresarial.


¡Saludos Ágiles, Feliz Navidad y Próspero 2024!

Jorge Abad.


Referencias

  1. Prompt:"trabajadores corporativos sosteniendo tubos de ensayo, con una imagen de flujo de procesos al fondo, imagen realista" https://www.bing.com/images/create/trabajadores-corporativos-sosteniendo-tubos-de-ens/1-658b2fead1e24217adcb1878967bee88?id=ZIdFWt6D0m7eaQnaXt57tw%3d%3d&view=detailv2&idpp=genimg&FORM=GCRIDP&mode=overlay