Contar valor y limitaciones a los interesados

Un equipo de atención al cliente hizo un piloto de seis semanas: los agentes usaron Claude para redactar respuestas a reclamos escritos y corrigieron cada borrador antes de mandarlo. El tiempo de redacción bajó cerca de un 30%, y uno de cada diez borradores necesitó una corrección importante, casi siempre en datos de facturación. La directora ya le anunció al directorio que Claude va a “automatizar del todo las respuestas el trimestre que viene” y planea achicar el equipo.

El líder del piloto tiene los números que hacen falta para frenar una mala decisión. La pregunta es cómo contarlos.

Lo que necesita saber quien decide

Los interesados (stakeholders) no van a usar Claude todos los días; van a decidir presupuesto, personal y riesgo con lo que les cuentes. Un buen informe tiene cuatro partes:

1. Resultados medidos (measured results): qué se midió, contra qué y cuánto cambió. “La revisión por contrato pasó de unos 90 minutos a 50 en 40 contratos” vale más que “ahorra mucho tiempo”.
2. Qué hace Claude y qué no: redacta el primer borrador, marca cláusulas, agrupa comentarios. No aprueba, no manda, no decide.
3. Limitaciones (limitations) que mostró el piloto, con números: “omitió dos cláusulas fuera de estándar, que los abogados detectaron en su revisión”; “uno de cada diez borradores tenía errores de facturación”.
4. Dónde sigue la revisión humana (human review) y por qué: los errores encontrados son justamente el motivo.

Los errores no debilitan la propuesta: la vuelven creíble. Un director financiero que pide “un número en el que podamos confiar” desconfía de un piloto sin fallas.

Ajustar las expectativas

Gestionar expectativas (expectations) es parte del trabajo. Si alguien ya prometió automatización total, el informe tiene que mostrar con datos por qué eso no surge del piloto: el 30% de ahorro existió con un agente corrigiendo cada borrador. Sin esa corrección, uno de cada diez clientes recibiría un dato de facturación equivocado.

Adaptá el énfasis a cada interesado, sin cambiar los datos:

Interesado	Qué le preocupa	Qué destacar
Finanzas	Que el número sea real	Medición del piloto, tamaño de la muestra, costo del tiempo de revisión
Legal o cumplimiento	Que los errores no lleguen afuera	Qué se escapó, quién lo detectó, qué control sigue
Dirección del área	Capacidad del equipo	Horas liberadas y en qué se van a usar

Lo que no da confianza

• Cifras de folletos de proveedores sobre “la IA en general”.
• Proyectar el ahorro de un equipo a toda la empresa sin probarlo en otros equipos.
• Prometer que la revisión humana va a desaparecer “cuando esté en marcha”.
• Esconder los números por miedo a que se malinterpreten: sin datos, la decisión se toma igual, peor informada.
• Declarar que el piloto fracasó porque hubo errores, cuando el ahorro fue real y los errores se atajaron.

Las trampas típicas

• Sumarse al plan de automatización total porque el ahorro “demuestra que está listo”.
• Recomendar “más pruebas” sin dar ningún número.
• Tirar el piloto por un 10% de correcciones.
• Usar benchmarks genéricos en lugar de los resultados propios.

En el examen

Si el escenario pregunta qué comunicar o qué hace creíble una propuesta, buscá la opción que combina el valor medido con las limitaciones observadas y explica dónde sigue la revisión humana. En las de “elegí dos”, suelen ir juntas los resultados del piloto (incluidos los errores) y la descripción de los controles. Descartá promesas de automatización total, extrapolaciones sin prueba, cifras de marketing y el silencio sobre los números.