Cómo probar un conserje IA antes de que lo usen tus huéspedes

Para probar un conserje IA antes de que lo usen tus huéspedes, arma una lista de preguntas reales del hotel, define qué cuenta como una buena respuesta y revisa los resultados con el equipo que hoy atiende esas consultas. La prueba termina cuando las respuestas son correctas, los casos delicados pasan a una persona y nadie del equipo encuentra un dato desactualizado.

Hacerlo toma pocas horas y te ahorra corregir errores frente a un huésped. Lo que sigue es un método sencillo para organizar esa prueba.

Arma una lista de casos de prueba

Un caso de prueba es una pregunta concreta con la respuesta que esperas. No sirve probar con preguntas inventadas en la oficina, porque los huéspedes no escriben así. Pídele a recepción mensajes reales de las últimas semanas, sin datos personales, y úsalos como base.

Para que la prueba cubra lo importante, incluye estos tipos de casos.

• Preguntas frecuentes con respuesta estable, como el horario del desayuno.
• Preguntas escritas de forma incompleta o con errores, como «a q hora cierra la pisina».
• Preguntas en otros idiomas. La web de Contler indica que el agente atiende en más de 20 idiomas, así que prueba al menos los que más recibe tu hotel.
• Preguntas sobre algo que el hotel no ofrece, para ver que el agente no lo invente.
• Solicitudes que dependen de una reserva o de disponibilidad.
• Casos que deben pasar a una persona, como una queja o una emergencia.

Con 30 o 40 casos tienes una base razonable para un primer ciclo. Es una sugerencia de partida, no una regla.

Cómo probar un conserje IA con criterios claros

Antes de mirar las respuestas, define cómo las vas a calificar. Si no lo haces, cada persona del equipo juzgará con su propio criterio y la revisión se vuelve una discusión.

Cuatro criterios suelen bastar.

1. Exactitud. El dato es correcto y está vigente.
2. Completitud. La respuesta incluye la condición o el siguiente paso cuando hace falta.
3. Límites. El agente no promete algo que no puede cumplir ni inventa un servicio.
4. Paso a una persona. Los casos delicados o que requieren una decisión llegan al equipo.

Califica cada caso como correcto, corregible o grave. Un error grave es uno que podría hacerle daño al huésped o al hotel, como dar un horario equivocado de salida o responder una emergencia sin avisar a nadie.

Quién debe hacer la prueba

La prueba la deberían hacer quienes conocen las respuestas. Recepción revisa lo general, y cada jefe de área revisa lo suyo, por ejemplo restaurante, spa o mantenimiento.

Ayuda que una persona distinta a la que preparó la información haga las preguntas. Quien escribió el contenido tiende a preguntar justo lo que escribió.

Qué hacer con cada error

En una primera prueba, muchos errores vienen de la información y no del agente. Antes de concluir que algo no funciona, revisa si el dato estaba, si estaba vigente y si tenía la condición completa.

Anota cada error con tres datos, qué se preguntó, qué respondió el agente y qué debió responder. Corrige el contenido y repite solo los casos que fallaron, más algunos que ya funcionaban para confirmar que nada se dañó.

Ejemplo ilustrativo. Un hotel prueba la pregunta «¿puedo llevar a mi perro?» y el agente responde que sí, pero no menciona el cargo adicional ni el límite de peso. El error no es del agente, es de la política que se cargó sin esas condiciones. Se corrige el texto y se vuelve a probar.

Cuándo está listo para los huéspedes

Define el criterio de salida antes de empezar. Una forma razonable es exigir cero errores graves, todos los casos delicados pasando a una persona y el visto bueno de recepción y de cada jefe de área sobre sus respuestas.

Abrir el agente no cierra la revisión. Durante las primeras semanas conviene leer conversaciones reales con frecuencia, porque los huéspedes siempre preguntan algo que nadie anticipó.

Si te preocupa que la prueba se quede en una demostración que nunca llega a operación, escribí sobre ese riesgo en este artículo sobre el piloto. Este método es la parte práctica, la lista que usas el día que pruebas.

Preguntas frecuentes

¿Cuántos casos de prueba necesito?

Depende del tamaño del hotel y de cuántos servicios tiene. Treinta o cuarenta casos bien elegidos son un buen primer ciclo. Lo importante es cubrir los tipos de pregunta, no llegar a un número.

¿Puedo probar el agente sin que lo vean los huéspedes?

Esa es la idea de esta etapa. Confirma con Contler cómo hacer la prueba interna en tu caso antes de compartir el canal con los huéspedes.

¿Qué hago si el agente responde algo que el hotel no ofrece?

Trátalo como error grave. Revisa si la información cargada da pie a esa respuesta y deja claro qué servicios no existen.

¿Cuánto debe durar la prueba?

No hay un plazo fijo. Termina cuando cumples el criterio de salida que definiste. Para un hotel pequeño puede ser cuestión de días.

¿Hay que repetir la prueba después del lanzamiento?

Sí, cada vez que cambie información importante, como horarios, servicios o políticas. Guarda la lista de casos para reutilizarla.

¿Quién aprueba el lanzamiento?

Quien responde por la atención al huésped, con el visto bueno de los jefes de área cuyas respuestas maneja el agente.

Lo que puedes hacer esta semana

Pídele a recepción veinte mensajes reales de huéspedes y conviértelos en casos de prueba con su respuesta esperada. Si todavía no tienes un agente para probarlos, puedes crear tu Conserje IA y empezar con esa lista.