Validación y testeo de prototipos
Ocho amigos miran un prototipo de app mientras el equipo se los explica, y todos dicen que «está genial». Después, tres chicos de otro curso lo reciben sin ninguna explicación y ninguno sabe por dónde empezar. ¿Cuál de las dos pruebas muestra la verdad sobre el producto?
Validar no es que al equipo le guste
Explicá qué es validar un prototipo y en qué se diferencia de «que a tu equipo le guste». ¿Por qué no basta con preguntarles a tus amigos si tu idea es buena?
Explicá qué es validar un prototipo y en qué se diferencia de «que a tu equipo le guste». ¿Por qué no basta con preguntarles a tus amigos si tu idea es buena?
Explicá qué es un usuario de prueba (tester) y por qué tu abuela o tu mejor amigo son testers sospechosos. Describí el perfil de tres buenos testers para una app de…
Explicá qué es un usuario de prueba (tester) y por qué tu abuela o tu mejor amigo son testers sospechosos. Describí el perfil de tres buenos testers para una app de apuntes de la escuela (quiénes son y por qué su opinión cuenta más que la de tu familia).
Distinguí validar de verificar con un ejemplo del puesto de crepes: verificar es comprobar que la crepe está hecha según la receta; validar es comprobar que la gente…
Distinguí validar de verificar con un ejemplo del puesto de crepes: verificar es comprobar que la crepe está hecha según la receta; validar es comprobar que la gente quiere comprarla. Explicá por qué un producto puede estar «bien hecho» y aun así no vender.
Diseñar un test con usuarios reales
Vas a testear el puesto de jugos con $5$ compañeros. Describí qué les darías a probar, qué tres cosas anotarías de cada uno (qué elige, cuánto tarda en decidir, si…
Vas a testear el puesto de jugos con $5$ compañeros. Describí qué les darías a probar, qué tres cosas anotarías de cada uno (qué elige, cuánto tarda en decidir, si pagaría el precio) y por qué es mejor observar lo que hacen que preguntarles solo si les gusta.
Nombrá tres cosas que podés anotar en un test sin preguntar nada (dónde duda el usuario, qué botón toca primero, cuánto tarda) y explicá qué ventaja tiene observar…
Nombrá tres cosas que podés anotar en un test sin preguntar nada (dónde duda el usuario, qué botón toca primero, cuánto tarda) y explicá qué ventaja tiene observar frente a preguntar «¿te gusta?».
Diseñá el test de un prototipo de app de la escuela hecho con pantallas de papel: escribí el guion de $5$ pasos que le vas a pedir al usuario (buscar el horario, anotar…
Diseñá el test de un prototipo de app de la escuela hecho con pantallas de papel: escribí el guion de $5$ pasos que le vas a pedir al usuario (buscar el horario, anotar una tarea…), qué debe hacer solo (sin que lo ayudes) y qué vas a anotar en cada paso. Explicá por qué en el test el usuario «conduce» y vos te quedás callado.
Diseñá el test de usabilidad del prototipo del punto de intercambio de libros: el guion de $4$ pasos que le vas a pedir a cada usuario (encontrar el punto, buscar un…
Diseñá el test de usabilidad del prototipo del punto de intercambio de libros: el guion de $4$ pasos que le vas a pedir a cada usuario (encontrar el punto, buscar un libro, registrar la entrega), qué debe hacer solo y sin ayuda, qué vas a anotar en cada paso y cuántos testers van a buscar. Explicá por qué con $5$ buenos testers ya se detectan la mayoría de los problemas grandes.
La primera validación de ustedes salió «demasiado bien»: le mostraron el prototipo a $8$ amigos explicándolo ustedes mismos, y todos dijeron que «está genial». Al…
La primera validación de ustedes salió «demasiado bien»: le mostraron el prototipo a $8$ amigos explicándolo ustedes mismos, y todos dijeron que «está genial». Al probarlo solos, $3$ compañeros de otro curso no supieron ni cómo empezar.
- a) Identificá los tres errores del primer test (muestra, explicación previa, preguntas que empujan al elogio).
- b) Rediseñá el test con las reglas correctas (el usuario maneja, vos te callás, tareas en vez de opiniones) y escribí las dos primeras frases que le dirás al tester.
El equipo testeó su app de apuntes con $10$ usuarios: sus $8$ mejores amigos y $2$ familiares. Todo fueron elogios y ninguna objeción. Al lanzarla, los alumnos la…
El equipo testeó su app de apuntes con $10$ usuarios: sus $8$ mejores amigos y $2$ familiares. Todo fueron elogios y ninguna objeción. Al lanzarla, los alumnos la encuentran confusa.
- a) Analizá por qué el test salió «perfecto» y aun así falló: qué sesgos tenía la muestra y el guion.
- b) Rediseñá el test: a quiénes elegirías, qué instrucciones les darías y qué harías para que las críticas salgan a la luz.
Métricas: separar señal de ruido
Para decidir qué arreglar mirás dos cosas: cuánta gente lo pide y cuánto bloquea el uso. Algo que muchos piden pero no impide usar el producto (modo oscuro) pesa menos que algo que traba a varios (no encontrar el buscador). Un pedido aislado es ruido: se anota, pero no se corre a hacerlo. «Contentar a todos» es la receta para no lanzar nunca.
Explicá qué es una métrica y por qué «parece que gustó» no es una métrica. Escribí una métrica concreta para cada proyecto: el puesto de desayunos, la app de apuntes y…
Explicá qué es una métrica y por qué «parece que gustó» no es una métrica. Escribí una métrica concreta para cada proyecto: el puesto de desayunos, la app de apuntes y el punto de intercambio de libros.
Tu equipo testeó el prototipo y tiene una lista de $12$ fallos. Explicá por qué no conviene arreglar los $12$ a la vez y en qué orden razonable atacarlos (primero los…
Tu equipo testeó el prototipo y tiene una lista de $12$ fallos. Explicá por qué no conviene arreglar los $12$ a la vez y en qué orden razonable atacarlos (primero los que bloquean el uso, luego los que molestan mucho, al final los detalles). Poné un ejemplo de cada tipo.
En el primer test del puesto de panqueques, $3$ de cada $10$ probadores piden la versión salada y la valoración media del sabor dulce es de $7,2$ sobre $10$; tras…
En el primer test del puesto de panqueques, $3$ de cada $10$ probadores piden la versión salada y la valoración media del sabor dulce es de $7,2$ sobre $10$; tras cambiar la receta, la media sube a $8,5$ y $5$ de cada $10$ piden salados.
- a) Interpretá las dos métricas y explicá qué decisiones tomarías con la carta (precio, protagonismo de lo salado, receta dulce).
- b) Proponé una tercera métrica útil para el próximo test (tiempo de cola, repetición, precio aceptado) y justificala.
Del test de la app de ustedes salen $15$ comentarios: dos personas piden modo oscuro, una pide que hable con Alexa, ocho se quejan de que no se entiende el botón…
Del test de la app de ustedes salen $15$ comentarios: dos personas piden modo oscuro, una pide que hable con Alexa, ocho se quejan de que no se entiende el botón principal y cuatro no comentan nada. Explicá cómo distinguís la señal del ruido (cuánta gente lo pide, cuánto bloquea el uso) y decidí qué dos cambios harían primero, defendiendo el orden.
En el test del puesto de desayunos, $6$ de $10$ probadores completan la compra en menos de $2$ minutos; $3$ preguntan por opciones sin gluten (no hay) y la valoración…
En el test del puesto de desayunos, $6$ de $10$ probadores completan la compra en menos de $2$ minutos; $3$ preguntan por opciones sin gluten (no hay) y la valoración media del producto es $8,1$ sobre $10$.
- a) Interpretá las tres métricas y decidí las dos primeras mejoras, justificando el orden.
- b) Proponé la hipótesis que probarían en el siguiente test («si agregamos una opción sin gluten, $X$ pasará») y la métrica que la confirmaría.
El equipo probó su app con $20$ alumnos y recogió $25$ comentarios: $9$ piden modo oscuro, $6$ se quejan de que no encuentran el buscador, $4$ piden avisos de exámenes,…
El equipo probó su app con $20$ alumnos y recogió $25$ comentarios: $9$ piden modo oscuro, $6$ se quejan de que no encuentran el buscador, $4$ piden avisos de exámenes, $3$ piden stickers y $3$ no dijeron nada.
- a) Ordená los cambios por señal (cuánta gente lo pide y cuánto bloquea) y decidí qué dos entran en la próxima versión, defendiendo el criterio.
- b) Explicá qué harías con el comentario de los stickers y por qué «contentar a todos» es la receta para no lanzar nunca.
El bucle de validación y sus límites
Para empezar a probar no hace falta tener todo terminado: alcanza con un producto mínimo viable, la versión más simple que permite validar la idea con usuarios reales. Después de cada vuelta, el equipo decide si perseverar (las métricas mejoran y la idea se sostiene) o cambiar el rumbo (pivotar: modificar el problema que resuelve, el público o la solución) cuando los datos muestran que el camino actual no funciona.
Cada vuelta se apoya en una hipótesis con su métrica: «si agregamos una opción sin gluten, más gente completará la compra; lo confirmamos si pasamos de $6$ a $8$ de cada $10$». Fijar de antemano el umbral de éxito evita autoconvencerse después. Además, lo que la gente dice vale menos que lo que hace: un puesto mínimo con plata real en un recreo prueba más que preguntar «¿comprarías?».
La figura muestra el bucle de trabajo de un equipo que valida su prototipo, pero una de las estaciones está tapada con un signo de interrogación. a) Indicá qué estación…
La figura muestra el bucle de trabajo de un equipo que valida su prototipo, pero una de las estaciones está tapada con un signo de interrogación.
- a) Indicá qué estación falta en el bucle (qué hace el equipo con lo aprendido en el test) y por qué sin ella el bucle no gira.
- b) Explicá qué representa el centro del bucle y por qué no puede ser «la opinión del propio equipo».
El puesto de jugos hizo dos rondas de prueba. Ronda 1: $40\ \%$ de los que se acercaban compraban, espera promedio de $6$ minutos, valoración del sabor $6,5$. Ronda 2…
El puesto de jugos hizo dos rondas de prueba. Ronda 1: $40\ \%$ de los que se acercaban compraban, espera promedio de $6$ minutos, valoración del sabor $6,5$. Ronda 2 (con receta nueva y dos jarras): $55\ \%$ de compra, espera de $3$ minutos, sabor $8,2$.
- a) Interpretá la evolución: qué cambió, qué métrica lo confirma y qué dirías si alguien del equipo afirma que «ya está perfecto».
- b) Proponé la siguiente métrica a mejorar (porcentaje que repite, ventas por hora pico) y diseñá cómo la medirían en la feria.
Dos rondas de test del puesto de desayunos dan estos datos: versión $1$: $3$ de $10$ clientes completan la compra y valoran la espera con un $4$ sobre $10$; versión $2$…
Dos rondas de test del puesto de desayunos dan estos datos: versión $1$: $3$ de $10$ clientes completan la compra y valoran la espera con un $4$ sobre $10$; versión $2$ (con pedido anticipado y dos cajas): $8$ de $10$ completan y la espera se valora con un $8$.
- a) Interpretá la evolución: qué problema tenía la versión $1$, qué cambió y qué métrica lo demuestra.
- b) Proponé la siguiente hipótesis a testear (qué mejoraría aún más la compra) y diseñá la mini-prueba con su métrica de éxito.
Dos equipos validan el mismo tipo de puesto. El A pregunta: «¿te gustaría que hubiera un puesto de desayunos saludables?» ($90\ \%$ dice que sí). El B arma un puesto…
Dos equipos validan el mismo tipo de puesto. El A pregunta: «¿te gustaría que hubiera un puesto de desayunos saludables?» ($90\ \%$ dice que sí). El B arma un puesto mínimo durante un recreo y mide: $15$ compras de $60$ personas que pasaron.
- a) Explicá qué midió realmente cada equipo y por qué el «sí» del equipo A vale menos que las $15$ compras del B (diferencia entre opinión declarada y comportamiento real).
- b) Diseñen su validación definitiva para la feria: qué experimento con plata real harían antes, con qué umbral de éxito escrito de antemano («si menos de $X$ de cada $Y$ compran, cambiamos de producto»).
«Validar es para los que no creen en su idea; los grandes emprendedores siguen su instinto.» a) Resumí el argumento y detectá qué confunde (la idea con su ejecución: el…
«Validar es para los que no creen en su idea; los grandes emprendedores siguen su instinto.»
- a) Resumí el argumento y detectá qué confunde (la idea con su ejecución: el instinto propone, el usuario dispone).
- b) Rebatilo con el caso del equipo que «sabía» que las pulseras rojas serían las más vendidas y terminó regalándolas mientras se agotaban las azules, y extraé una regla práctica: qué decisiones pueden dejarse al instinto y cuáles no.
Su cooperativa lanza la v3 del puesto tras dos validaciones. La feria real, sin embargo, sale peor que los tests: colas largas, se les agota la mercadería a media mañana…
Su cooperativa lanza la v3 del puesto tras dos validaciones. La feria real, sin embargo, sale peor que los tests: colas largas, se les agota la mercadería a media mañana y varios clientes se van sin comprar.
- a) Explicá por qué los tests no predijeron esto (escala, hora pico, estrés del equipo: el laboratorio no es el mundo real) y qué aprende un equipo ágil de esta «falla» del test.
- b) Diseñá el informe post-feria: qué cinco datos van a recoger durante el evento (ventas por hora, cola máxima, momento de agotamiento, quejas, qué se agotó primero) y qué tres decisiones van a tomar para el próximo evento con esos datos.
El equipo de la app de organización la lanzó sin validar: $6$ meses de trabajo, $200$ descargas la primera semana… y el $80\ \%$ la desinstaló al segundo día. Las…
El equipo de la app de organización la lanzó sin validar: $6$ meses de trabajo, $200$ descargas la primera semana… y el $80\ \%$ la desinstaló al segundo día. Las reseñas dicen «no se entiende» y «no encuentro nada».
- a) Reconstruí qué validación habría detectado el desastre en la semana $2$ (test con pantallas de papel, $5$ usuarios, tareas concretas) y qué habría costado frente a $6$ meses.
- b) Diseñá el plan de rescate: qué test hacen ahora con la app real, a cuántos usuarios, qué tres tareas les piden y qué dos cambios urgentes esperan encontrar antes de relanzar.
Diseñá el sistema completo de validación del proyecto de tu clase para este año: qué se valida antes de construir (concepto), qué se valida con el prototipo (uso), qué…
Diseñá el sistema completo de validación del proyecto de tu clase para este año: qué se valida antes de construir (concepto), qué se valida con el prototipo (uso), qué se valida en el lanzamiento (mercado real) y qué se valida después (mejora continua). Para cada fase indicá el método, el número de personas implicadas, la métrica de éxito y la decisión que van a tomar si el resultado es malo. Defendé por qué validar es un seguro y no una pérdida de tiempo.
Validar también el proceso del equipo
Validar no es solo probar el producto: también se revisa cómo trabaja el equipo. Una autoevaluación es un cuestionario breve que cada integrante responde por separado, para que nadie copie la opinión de los demás. Se puntúa de $1$ a $5$ y se pone en común después.
Validar no es solo el producto: también el proceso del equipo. Diseñá una autoevaluación del proyecto con cinco preguntas que el equipo responderá individualmente…
Validar no es solo el producto: también el proceso del equipo. Diseñá una autoevaluación del proyecto con cinco preguntas que el equipo responderá individualmente (reparto justo de tareas, cumplimiento de plazos, calidad de las decisiones, clima del grupo, aprendizaje personal). Explicá cómo se pondrán en común las respuestas y qué van a hacer si una pregunta sale muy baja.
Comunicar la propuesta de valor al validar
Antes de invertir, hay que mostrar la idea a usuarios potenciales. La propuesta de valor dice qué problema resuelve tu producto y para quién. Se comunica con un cartel o con un elevator pitch: un discurso de máximo $60$ segundos.
Después, el testeo de campo: se presenta el soporte a $5$ usuarios potenciales y se les pide un puntaje de $1$ a $5$ en preguntas como la necesidad que resuelve y la claridad del mensaje. Se promedian los puntajes para ver qué mejorar, y como son opiniones, conviene complementarlos con observación de lo que hacen.
Reto del tema. Imaginate que vas a lanzar el prototipo de tu bien o servicio al mercado local y necesitás validar su viabilidad antes de invertir recursos. 1. Estrategia…
Reto del tema. Imaginate que vas a lanzar el prototipo de tu bien o servicio al mercado local y necesitás validar su viabilidad antes de invertir recursos.
-
Estrategia de difusión: Diseñá un cartel digital (o boceto en papel) o redactá el guion de un elevator pitch de máximo $60$ segundos que comunique con impacto la propuesta de valor y las características clave de tu prototipo.
-
Testeo de campo: Presentá tu soporte a $5$ usuarios potenciales (familiares o compañeros) y aplicá un cuestionario rápido pidiéndoles que puntúen de $1$ a $5$: necesidad que resuelve, claridad de la propuesta y disposición a pagar un precio estimado.
-
Análisis de resultados: Tabulá las respuestas, calculá la media aritmética de cada ítem con un decimal (por ejemplo, una utilidad de $4,2$) y anotá las principales sugerencias cualitativas que te hayan aportado.
-
Informe de iteración: Redactá una propuesta razonada de media página con $2$ modificaciones concretas que vas a incorporar a tu prototipo a partir del feedback recibido para optimizar su diseño.
Se valorará:
-
Claridad y capacidad de persuasión en el soporte y estrategia de difusión.
-
Rigor en la recolección y el cálculo de las métricas del testeo real.
-
Justificación de las mejoras del prototipo a partir de la retroalimentación obtenida.
Volvé al principio: revela la verdad el test con personas neutrales y sin explicaciones previas: muestra cómo se comporta un usuario solo, mientras que con los amigos el cariño y la guía del equipo taparon los fallos.