Sitch

Introducción

Sitch es una aplicación de citas basada en inteligencia artificial que actúa como un casamentero digital personal. En lugar de deslizar el dedo de forma casual, los usuarios son emparejados a través de un chatbot con IA entrenado por un casamentero humano para lograr una compatibilidad más profunda, dirigido a aquellos que buscan seriamente una pareja y desean un proceso más reflexivo.

La experiencia comienza con una incorporación en profundidad, en la que la IA hace preguntas para comprender los valores, las prioridades y las experiencias pasadas de los usuarios en materia de citas. La aplicación chatea contigo como un amigo para conocerte mejor y saber cuál es tu pareja ideal. A partir de tus respuestas, la IA te sugiere parejas compatibles. Si dos usuarios aceptan que se les presente, la IA los coloca en un chat grupal, como lo haría un amigo común. La aplicación utiliza un modelo de pago por configuración, cobrando a los usuarios por las presentaciones exitosas en lugar de una suscripción.

Reto

Cinco meses después de su lanzamiento preliminar, Sitch estaba ganando popularidad, pero también acumulando comentarios negativos de los usuarios. Como equipo centrado en el desarrollo, carecían de un proceso estructurado de control de calidad, lo que provocó que se colaran errores y problemas de usabilidad en la aplicación en vivo. Sitch se asoció con QAwerk para establecer un programa de pruebas eficaz desde cero, con el objetivo de transformar la experiencia del usuario y estabilizar el producto.

Al final de nuestra colaboración, Sitch quería lograr varios resultados clave:

• Reducir drásticamente los comentarios negativos: el objetivo principal era mejorar la satisfacción de los usuarios identificando y eliminando los errores y los flujos de usuario frustrantes que provocaban críticas negativas.
• Establecer un proceso de control de calidad sólido: implementar un flujo de trabajo de pruebas estructurado y eficiente que pudiera integrarse directamente en su ciclo de desarrollo, garantizando que ninguna nueva función o corrección introdujera nuevos problemas.
• Garantizar una funcionalidad básica impecable: garantizar que las funciones esenciales, como la incorporación impulsada por IA, la creación de perfiles, el chat y el emparejamiento, fueran intuitivas, estables y funcionaran perfectamente en todo momento.
>Lograr un rendimiento consistente en todos los dispositivos: ofrecer una experiencia fluida y visualmente pulida a todos los usuarios, independientemente del modelo de iPhone, la versión de iOS o las condiciones de la red.

Solución

Pruebas funcionales

Realizamos pruebas funcionales de todos los flujos críticos de los usuarios. Esto incluyó la validación de todo el cuestionario de incorporación, la prueba de la creación y edición de perfiles en la sección «Qué te hace ser tú» y la garantía de que el proceso de eliminación de cuentas fuera fluido. También probamos rigurosamente las opciones de chat y pantalla de pago para los nuevos usuarios. Nuestro equipo clasificó de forma proactiva los problemas, volvió a probar las correcciones de errores críticos e informó de los nuevos errores que descubrimos por el camino.

Por qué es importante: en una aplicación como Sitch, las funciones básicas definen toda la experiencia del usuario. Si un usuario no puede completar su perfil, chatear con una pareja compatible o comprender las sugerencias de la IA, la aplicación falla. Necesitábamos asegurarnos de que cada ruta del usuario fuera lógica, intuitiva y sin estrés.

Pruebas de IA

Realizamos pruebas de IA en el chat y el cuestionario de incorporación impulsados por IA. Nuestro equipo validó el tono y la relevancia del contenido de la IA, asegurándose de que las respuestas fueran adecuadas y útiles. También realizamos pruebas para encontrar fallos lógicos, como preguntas repetidas o en bucle en el cuestionario, para garantizar que la interacción del usuario con la IA fuera siempre coherente y eficaz.

Por qué es importante: la propuesta de valor fundamental de Sitch es su emparejador de IA. Si la conversación de la IA es repetitiva, irrelevante o ilógica, rompe la confianza del usuario y devalúa toda la promesa de «experiencia humana». Estas pruebas fueron esenciales para garantizar que la IA pareciera inteligente y personalizada.

Pruebas de regresión y previas al lanzamiento

Antes de cada lanzamiento, realizamos exhaustivas pruebas de regresión en todos los flujos principales: registro, incorporación, chat, configuraciones y pagos. Para los lanzamientos importantes, como el prelanzamiento en Chicago, ejecutamos una lista de verificación exhaustiva. Esto incluía validar el texto específico del mercado, probar los precios de suscripción para la nueva región, verificar que los enlaces de referencia y los eventos analíticos se activaran con los identificadores de mercado correctos y garantizar que los enlaces profundos de las notificaciones push dirigieran a los usuarios a la pantalla correcta.

Por qué es importante: a medida que los desarrolladores de Sitch corregían errores y añadían nuevas funciones, era fundamental garantizar que estos cambios no afectaran inadvertidamente a las funciones existentes. Las pruebas de regresión actúan como una red de seguridad, protegiendo la experiencia del usuario de consecuencias no deseadas con cada nueva versión de la aplicación. Esto cobró aún más importancia al lanzarse en nuevas ciudades, donde un solo error podía descarrilar toda la expansión del mercado.

Pruebas de compatibilidad y permisos

Realizamos pruebas de compatibilidad en diversas condiciones de red, simulando conexiones a Internet deficientes, inestables e inexistentes para garantizar que la aplicación siguiera respondiendo y no se bloqueara. También realizamos pruebas en diferentes dispositivos para garantizar que los elementos de la interfaz de usuario, como el relleno y los bloques de texto, se mostraran correctamente tanto en pantallas grandes como pequeñas. Por último, verificamos que los permisos cruciales de la aplicación para la galería, la ubicación y las notificaciones funcionaran según lo previsto.

Por qué es importante: los usuarios de aplicaciones de citas están en constante movimiento. Cambian entre Wi-Fi y datos móviles, viajan por zonas con mala recepción y utilizan una amplia gama de modelos de iPhone. La aplicación debe ser resistente a estos cambios y proporcionar una experiencia estable, tanto si el usuario tiene una conexión perfecta como si solo tiene una barra de servicio.

Pruebas de interfaz de usuario

Nuestro equipo examinó meticulosamente cada pantalla para garantizar una experiencia de usuario coherente y de alta calidad. Identificamos y señalamos problemas como un relleno incorrecto en teléfonos más pequeños, bloques de resumen de tamaño inadecuado e información desalineada en las pantallas de vista previa del perfil. Este enfoque en los detalles garantizó que la aplicación tuviera un aspecto y un funcionamiento profesionales en cualquier dispositivo.

Por qué es importante: el mundo de las aplicaciones de citas es bastante competitivo, por lo que el atractivo visual y la facilidad de uso son imprescindibles. Una interfaz confusa o poco intuitiva puede hacer que el usuario abandone la aplicación antes incluso de que la IA tenga la oportunidad de hacer su magia. La experiencia debe ser pulida, moderna e intuitiva.

Pruebas exploratorias

Después de cada lanzamiento y una vez completadas las pruebas de regresión, nuestro equipo realizó pruebas exploratorias manuales. Nos desviamos intencionadamente de las rutas de usuario estándar, probando combinaciones inusuales de acciones, probando casos extremos de enlaces de referencia y sometiendo a la aplicación a un estrés para descubrir errores ocultos, lagunas de usabilidad y posibles escenarios de fallo que las pruebas programadas no detectarían.

Por qué es importante: las pruebas programadas confirman que la funcionalidad funciona según lo esperado, pero las pruebas exploratorias descubren problemas que no se buscaban. Para una aplicación de alta gama, los errores ocultos y las frustraciones de usabilidad son inaceptables.