Validación y testeo de prototipos
Ocho amigos miran un prototipo de app mientras el equipo se los explica, y todos dicen que «está genial». Después, tres compañeros de otro grado lo reciben sin ninguna explicación y ninguno sabe por dónde empezar. ¿Cuál de las dos pruebas muestra la verdad sobre el producto?
Validar no es que al equipo le guste
Explicá qué es validar un prototipo y en qué se diferencia de «que a tu equipo le guste». ¿Por qué no basta con preguntarles a tus amigos si tu idea es buena?
Explicá qué es validar un prototipo y en qué se diferencia de «que a tu equipo le guste». ¿Por qué no basta con preguntarles a tus amigos si tu idea es buena?
Explicá qué es un usuario de prueba (tester) y por qué tu abuela o tu mejor amigo son testers sospechosos. Describí el perfil de tres buenos testers para una app de…
Explicá qué es un usuario de prueba (tester) y por qué tu abuela o tu mejor amigo son testers sospechosos. Describí el perfil de tres buenos testers para una app de apuntes del insti (quiénes son y por qué su opinión cuenta más que la de tu familia).
Distinguí validar de verificar con un ejemplo del puesto de crepas: verificar es comprobar que la crepa está hecha según la receta; validar es comprobar que la gente…
Distinguí validar de verificar con un ejemplo del puesto de crepas: verificar es comprobar que la crepa está hecha según la receta; validar es comprobar que la gente quiere comprarla. Explicá por qué un producto puede estar «bien hecho» y aun así no vender.
Diseñar un test con usuarios reales
Vas a probar el puesto de jugos con $5$ compañeros. Describí qué les darías a probar, qué tres cosas anotarías de cada uno (qué elige, cuánto tarda en decidir, si…
Vas a probar el puesto de jugos con $5$ compañeros. Describí qué les darías a probar, qué tres cosas anotarías de cada uno (qué elige, cuánto tarda en decidir, si pagaría el precio) y por qué es mejor observar lo que hacen que preguntarles solo si les gusta.
Nombrá tres cosas que podés anotar en un test sin preguntar nada (dónde duda el usuario, qué botón presiona primero, cuánto tarda) y explicá qué ventaja tiene observar…
Nombrá tres cosas que podés anotar en un test sin preguntar nada (dónde duda el usuario, qué botón presiona primero, cuánto tarda) y explicá qué ventaja tiene observar frente a preguntar «¿te gusta?».
Diseñá el test de un prototipo de app del insti hecho con pantallas de papel: escribí el guion de $5$ pasos que le vas a pedir al usuario (buscar el horario, apuntar una…
Diseñá el test de un prototipo de app del insti hecho con pantallas de papel: escribí el guion de $5$ pasos que le vas a pedir al usuario (buscar el horario, apuntar una tarea…), qué debe hacer solo (sin que lo ayudés) y qué vas a anotar en cada paso. Explicá por qué en el test el usuario «conduce» y vos te quedás callado.
Diseñá el test de usabilidad del prototipo del punto de intercambio de libros: el guion de $4$ pasos que le vas a pedir a cada usuario (encontrar el punto, buscar un…
Diseñá el test de usabilidad del prototipo del punto de intercambio de libros: el guion de $4$ pasos que le vas a pedir a cada usuario (encontrar el punto, buscar un libro, registrar la entrega), qué debe hacer solo sin ayuda, qué vas a anotar en cada paso y cuántos testers van a buscar. Explicá por qué con $5$ buenos testers se detectan ya la mayoría de los problemas grandes.
La primera validación de ustedes salió «demasiado bien»: les enseñaron el prototipo a $8$ amigos explicándolo ustedes mismos, y todos dijeron que «está genial». Al…
La primera validación de ustedes salió «demasiado bien»: les enseñaron el prototipo a $8$ amigos explicándolo ustedes mismos, y todos dijeron que «está genial». Al probarlo solos, $3$ compañeros de otra clase no supieron ni empezar.
- a) Identificá los tres errores del primer test (muestra, explicación previa, preguntas que empujan al elogio).
- b) Rediseñá el test con las reglas correctas (el usuario conduce, vos te callás, tareas en vez de opiniones) y escribí las dos primeras frases que le dirás al tester.
El equipo probó su app de apuntes con $10$ usuarios: sus $8$ mejores amigos y $2$ familiares. Todo fueron elogios y ninguna pega. Al lanzarla, el alumnado la encuentra…
El equipo probó su app de apuntes con $10$ usuarios: sus $8$ mejores amigos y $2$ familiares. Todo fueron elogios y ninguna pega. Al lanzarla, el alumnado la encuentra confusa.
- a) Analizá por qué la prueba salió «perfecta» y aun así falló: qué sesgos tenía la muestra y el guion.
- b) Rediseñá la prueba: a quiénes elegirías, qué instrucciones les darías y qué harías para que las críticas salgan a la luz.
Métricas: separar señal de ruido
Para decidir qué arreglar mirás dos cosas: cuánta gente lo pide y cuánto bloquea el uso. Algo que muchos piden pero no impide usar el producto (modo oscuro) pesa menos que algo que traba a varios (no encontrar el buscador). Un pedido aislado es ruido: se anota, pero no se corre a hacerlo. «Contentar a todos» es la receta para no lanzar nunca.
Explicá qué es una métrica y por qué «parece que gustó» no es una métrica. Escribí una métrica concreta para cada proyecto: el puesto de desayunos, la app de apuntes y…
Explicá qué es una métrica y por qué «parece que gustó» no es una métrica. Escribí una métrica concreta para cada proyecto: el puesto de desayunos, la app de apuntes y el punto de intercambio de libros.
Tu equipo ha probado el prototipo y tiene una lista de $12$ fallos. Explicá por qué no conviene arreglar los $12$ a la vez y en qué orden razonable atacarlos (primero…
Tu equipo ha probado el prototipo y tiene una lista de $12$ fallos. Explicá por qué no conviene arreglar los $12$ a la vez y en qué orden razonable atacarlos (primero los que bloquean el uso, luego los que molestan mucho, al final los detalles). Poné un ejemplo de cada tipo.
En el primer test del puesto de crepas, $3$ de cada $10$ probadores piden la versión salada y la valoración media del sabor dulce es de $7.2$ sobre $10$; tras cambiar la…
En el primer test del puesto de crepas, $3$ de cada $10$ probadores piden la versión salada y la valoración media del sabor dulce es de $7.2$ sobre $10$; tras cambiar la receta, la media sube a $8.5$ y $5$ de cada $10$ piden salados.
- a) Interpretá las dos métricas y explicá qué decisiones tomarías con el menú (precio, protagonismo de lo salado, receta dulce).
- b) Proponé una tercera métrica útil para la próxima prueba (tiempo de fila, repetición, precio aceptado) y justificala.
Del test de la app de ustedes salen $15$ comentarios: dos personas piden modo oscuro, una pide que hable con Alexa, ocho se quejan de que no se entiende el botón…
Del test de la app de ustedes salen $15$ comentarios: dos personas piden modo oscuro, una pide que hable con Alexa, ocho se quejan de que no se entiende el botón principal y cuatro no comentan nada. Explicá cómo distinguís la señal del ruido (cuánta gente lo pide, cuánto bloquea el uso) y decidí qué dos cambios harían primero, defendiendo el orden.
En el test del puesto de desayunos, $6$ de $10$ probadores completan la compra en menos de $2$ minutos; $3$ preguntan por opciones sin gluten (no hay) y la valoración…
En el test del puesto de desayunos, $6$ de $10$ probadores completan la compra en menos de $2$ minutos; $3$ preguntan por opciones sin gluten (no hay) y la valoración media del producto es $8.1$ sobre $10$.
- a) Interpretá las tres métricas y decidí las dos primeras mejoras, justificando el orden.
- b) Proponé la hipótesis que probarían en el siguiente test («si añadimos una opción sin gluten, $X$ pasará») y la métrica que la confirmaría.
El equipo probó su app con $20$ alumnos y recogió $25$ comentarios: $9$ piden modo oscuro, $6$ se quejan de que no encuentran el buscador, $4$ piden avisos de exámenes,…
El equipo probó su app con $20$ alumnos y recogió $25$ comentarios: $9$ piden modo oscuro, $6$ se quejan de que no encuentran el buscador, $4$ piden avisos de exámenes, $3$ piden stickers y $3$ no dijeron nada.
- a) Ordená los cambios por señal (cuánta gente lo pide y cuánto bloquea) y decidí qué dos entran en la próxima versión, defendiendo el criterio.
- b) Explicá qué harías con el comentario de los stickers y por qué «contentar a todos» es la receta para no lanzar nunca.
El bucle de validación y sus límites
Para empezar a probar no hace falta tener todo terminado: alcanza con un producto mínimo viable, la versión más simple que permite validar la idea con usuarios reales. Después de cada vuelta, el equipo decide si perseverar (las métricas mejoran y la idea se sostiene) o cambiar el rumbo (pivotar: modificar el problema que resuelve, el público o la solución) cuando los datos muestran que el camino actual no funciona.
Cada vuelta se apoya en una hipótesis con su métrica: «si agregamos una opción sin gluten, más gente completará la compra; lo confirmamos si pasamos de $6$ a $8$ de cada $10$». Fijar de antemano el umbral de éxito evita autoconvencerse después. Además, lo que la gente dice vale menos que lo que hace: un puesto mínimo con dinero real en un recreo prueba más que preguntar «¿comprarías?».
La figura muestra el bucle de trabajo de un equipo que valida su prototipo, pero una de las estaciones está tapada con un signo de interrogación. a) Indicá qué estación…
La figura muestra el bucle de trabajo de un equipo que valida su prototipo, pero una de las estaciones está tapada con un signo de interrogación.
- a) Indicá qué estación falta en el bucle (qué hace el equipo con lo aprendido en el test) y por qué sin ella el bucle no gira.
- b) Explicá qué representa el centro del bucle y por qué no puede ser «la opinión del propio equipo».
El puesto de jugos hizo dos rondas de prueba. Ronda 1: $40\ \%$ de los que se acercaban compraban, espera media de $6$ minutos, valoración del sabor $6.5$. Ronda 2 (con…
El puesto de jugos hizo dos rondas de prueba. Ronda 1: $40\ \%$ de los que se acercaban compraban, espera media de $6$ minutos, valoración del sabor $6.5$. Ronda 2 (con receta nueva y dos jarras): $55\ \%$ de compra, espera de $3$ minutos, sabor $8.2$.
- a) Interpretá la evolución: qué cambió, qué métrica lo confirma y qué dirías si alguien del equipo afirma que «ya está perfecto».
- b) Proponé la siguiente métrica a mejorar (porcentaje que repite, ventas por hora pico) y diseñá cómo la mediríamos en la feria.
Dos rondas de prueba del puesto de desayunos dan estos datos: versión $1$: $3$ de $10$ clientes completan la compra y valoran la espera con un $4$ sobre $10$; versión…
Dos rondas de prueba del puesto de desayunos dan estos datos: versión $1$: $3$ de $10$ clientes completan la compra y valoran la espera con un $4$ sobre $10$; versión $2$ (con pedido anticipado y dos cajas): $8$ de $10$ completan y la espera se valora con un $8$.
- a) Interpretá la evolución: qué problema tenía la versión $1$, qué cambió y qué métrica lo demuestra.
- b) Proponé la siguiente hipótesis a probar (qué mejoraría aún más la compra) y diseñá la mini-prueba con su métrica de éxito.
Dos equipos validan el mismo tipo de puesto. El A pregunta: «¿te gustaría que hubiera un puesto de desayunos sanos?» ($90\ \%$ dice que sí). El B monta un puesto mínimo…
Dos equipos validan el mismo tipo de puesto. El A pregunta: «¿te gustaría que hubiera un puesto de desayunos sanos?» ($90\ \%$ dice que sí). El B monta un puesto mínimo en un recreo y mide: $15$ compras de $60$ personas que pasaron.
- a) Explicá qué midió realmente cada equipo y por qué el «sí» del equipo A vale menos que las $15$ compras del B (diferencia entre opinión declarada y comportamiento real).
- b) Diseñen su validación definitiva para la feria: qué experimento con dinero real harían antes, con qué umbral de éxito escrito de antemano («si menos de $X$ de cada $Y$ compran, cambiamos de producto»).
«Validar es para los que no creen en su idea; los grandes emprendedores siguen su instinto.» a) Resumí el argumento y detectá qué confunde (la idea con su ejecución: el…
«Validar es para los que no creen en su idea; los grandes emprendedores siguen su instinto.»
- a) Resumí el argumento y detectá qué confunde (la idea con su ejecución: el instinto propone, el usuario dispone).
- b) Rebatilo con el caso del equipo que «sabía» que las pulseras rojas serían las más vendidas y terminó regalándolas mientras se agotaban las azules, y extraé una regla práctica: qué decisiones pueden dejarse al instinto y cuáles no.
Su cooperativa lanza la v3 del puesto tras dos validaciones. La feria real, sin embargo, sale peor que los tests: colas largas, agotan el producto a media mañana y…
Su cooperativa lanza la v3 del puesto tras dos validaciones. La feria real, sin embargo, sale peor que los tests: colas largas, agotan el producto a media mañana y varios clientes se van sin comprar.
- a) Explicá por qué los tests no predijeron esto (escala, hora pico, estrés del equipo: el laboratorio no es el mundo real) y qué aprende un equipo ágil de esta «falla» del test.
- b) Diseñá el informe posterior a la feria: qué cinco datos van a recoger durante el evento (ventas por hora, cola máxima, momento de agotamiento, quejas, qué se agotó primero) y qué tres decisiones van a tomar para el próximo evento con esos datos.
El equipo de la app de organización la lanzó sin validar: $6$ meses de trabajo, $200$ descargas la primera semana… y el $80\ \%$ la desinstaló al segundo día. Las…
El equipo de la app de organización la lanzó sin validar: $6$ meses de trabajo, $200$ descargas la primera semana… y el $80\ \%$ la desinstaló al segundo día. Las reseñas dicen «no se entiende» y «no encuentro nada».
- a) Reconstruí qué validación habría detectado el desastre en la semana $2$ (test con pantallas de papel, $5$ usuarios, tareas concretas) y qué habría costado frente a $6$ meses.
- b) Diseñá el plan de rescate: qué test hacen ahora con la app real, a cuántos usuarios, qué tres tareas les piden y qué dos cambios urgentes esperan encontrar antes de relanzar.
Validar también el proceso del equipo
Validar no es solo probar el producto: también se revisa cómo trabaja el equipo. Una autoevaluación es un cuestionario breve que cada integrante responde por separado, para que nadie copie la opinión de los demás. Se puntúa de $1$ a $5$ y se pone en común después.
Diseñá el sistema completo de validación del proyecto de tu clase para este año: qué se valida antes de construir (concepto), qué se valida con el prototipo (uso), qué…
Diseñá el sistema completo de validación del proyecto de tu clase para este año: qué se valida antes de construir (concepto), qué se valida con el prototipo (uso), qué se valida en el lanzamiento (mercado real) y qué se valida después (mejora continua). Para cada fase indicá el método, el número de personas implicadas, la métrica de éxito y la decisión que van a tomar si el resultado es malo. Defendé por qué validar es un seguro y no una pérdida de tiempo.
Comunicar la propuesta de valor al validar
Antes de invertir, hay que mostrar la idea a usuarios potenciales. La propuesta de valor dice qué problema resuelve tu producto y para quién. Se comunica con un cartel o con una presentación de elevador: un discurso de máximo $60$ segundos.
Después, el testeo de campo: se presenta el soporte a $5$ usuarios potenciales y se les pide un puntaje de $1$ a $5$ en preguntas como la necesidad que resuelve y la claridad del mensaje. Se promedian los puntajes para ver qué mejorar, y como son opiniones, conviene complementarlos con observación de lo que hacen.
Reto del tema. Imaginá que vas a lanzar el prototipo de tu bien o servicio al mercado local y necesitás validar su viabilidad antes de invertir recursos. 1. Estrategia…
Reto del tema. Imaginá que vas a lanzar el prototipo de tu bien o servicio al mercado local y necesitás validar su viabilidad antes de invertir recursos.
-
Estrategia de difusión: Diseñá un cartel digital (o boceto en papel) o redactá el guion de un elevator pitch de máximo $60$ segundos que comunique con impacto la propuesta de valor y las características clave de tu prototipo.
-
Prueba de campo: Presentá tu soporte a $5$ usuarios potenciales (familiares o compañeros) y aplicá un cuestionario rápido pidiéndoles que puntúen de $1$ a $5$: necesidad que resuelve, claridad de la propuesta y disposición a pagar un precio estimado.
-
Análisis de resultados: Tabulá las respuestas, calculá la media aritmética de cada ítem con un decimal (por ejemplo, una utilidad de $4.2$) y anotá las principales sugerencias cualitativas que te hayan aportado.
-
Informe de iteración: Redactá una propuesta razonada de media página con $2$ modificaciones concretas que vas a incorporar a tu prototipo a partir del feedback recibido para optimizar su diseño.
Se valorará:
-
Claridad y capacidad de persuasión en el soporte y estrategia de difusión.
-
Rigor en la recogida y cálculo de las métricas de la prueba de campo real.
-
Justificación de las mejoras del prototipo a partir de la retroalimentación obtenida.
Volvé al principio: revela la verdad el test con personas neutrales y sin explicaciones previas: muestra cómo se comporta un usuario solo, mientras que con los amigos el cariño y la guía del equipo taparon los fallos.