Cómo pedirle a un proveedor que te diga qué NO revisó

Tres preguntas, un mensaje y una decisión sobre lo que quedó fuera

De esta guía sales con un mensaje escrito, listo para mandar, y con una forma de leer lo que te contesten. Nada más. No te enseña a auditar a nadie ni a saber si un proveedor dice la verdad. Te enseña a conseguir, por escrito, lo que hace falta para que tú decidas.

La lectura no juzga a quien afirma. Mide una cosa: cuáles de tus tres preguntas ya tienen respuesta en lo que te entregaron. Una afirmación puede estar completa y ser falsa, o abierta y ser cierta. Lo que cambia es cuánto puedes apoyar en ella sin saberlo.

Si todavía no leíste el artículo que acompaña esta guía, empieza por ahí. Aquí va lo que no cabía: las preguntas con sus casos dudosos, el mensaje frase por frase, cómo leer la respuesta y qué hacer con lo que dejaron fuera.

Una afirmación es una frase que alguien te entrega para que te apoyes en ella. "Verificado". "Revisado por nuestro equipo". "Certificado". "Probado". "Aprobado". "Seguro". Puede venir de un proveedor de software o de IA, de un contratista, de un banco o una aseguradora, de un sello en una web, o de tu propio equipo cuando te dice "ya lo revisé".

La palabra suena a medida y no lo es. Una medida tiene un qué y un contra qué: se midió esto, comparado con aquello. La palabra "verificado" sola no trae ninguno de los dos, y menos todavía el borde: lo que no se midió.

De ahí salen las tres preguntas. Son siempre las mismas, con las mismas palabras:

1. ¿Qué se comprobó, exactamente?
2. ¿Contra qué se comparó?
3. ¿Qué quedó fuera, y quién lo dice?

Y una cuarta, solo cuando aplica: si la afirmación está en un idioma y tu trabajo o tu contrato en otro, ¿se comprobó en los dos?

La respuesta tiene que estar escrita por quien afirma. Si la contestas tú, con lo que supones, no has leído la afirmación: la has completado.

Un ejemplo de alguien que escribe el borde. Anthropic publicó el 22 de octubre una investigación sobre verificación formal de código. La propia página dice que "formalmente verificado" no significa "sin errores", y que no verificaron todos los puntos de entrada de cada librería. Esto no quiere decir que aplique a tu negocio: es solo un caso donde el borde está escrito por quien lo trazó. Cuando recibes una palabra suelta, el borde no está escrito: por eso lo pides.

Exactamente quiere decir con nombre y con alcance: qué parte, hasta dónde.

En la herramienta que acompaña esta guía hay tres respuestas posibles:

• Con nombre y alcance. Imagina que te dicen: "Revisamos las 40 piezas del catálogo de otoño, una por una, con la ficha de materiales delante." Sabes qué entró.
• General. "Todo está revisado." Suena a mucho y no dice qué es "todo".
• No dicen. La palabra aparece sola.

Imagina una boutique de relojes que te manda un informe con la palabra "autenticado" en cada ficha. Lo que necesitas saber es qué se autenticó: ¿la caja, el movimiento, los papeles, las tres cosas? Una respuesta de "el reloj" es general. Una respuesta de "el número de serie del movimiento contra el registro de la casa y la caja por fuera, sin abrirla" es con nombre y con alcance, y de paso ya contesta media pregunta 3.

Un caso dudoso frecuente: te contestan con una lista larga de cosas que se hicieron, pero ninguna es lo que a ti te importa. Eso es una respuesta con nombre, a otra pregunta. Anota lo que dicen y vuelve a preguntar por lo tuyo.

Comprobar es comparar. Si te dicen contra qué, puedes ir a mirarlo.

Tres respuestas posibles:

• Contra una fuente o norma que nombran y que puedes abrir. Un estándar, un registro, un contrato, un documento. Es lo único que cuenta como completo, porque es lo único que puedes mirar tú.
• Contra su propio criterio, que no te muestran. "Lo revisamos con nuestros estándares internos." No es una mala respuesta, es una respuesta incompleta: te dice que hubo un criterio y no te deja verlo.
• No dicen contra qué.

Imagina una productora de eventos que te dice que el montaje está "aprobado" para tu conferencia. ¿Aprobado contra el aforo del salón, contra un listado de requisitos que pusiste tú en el contrato, o contra lo que ellos suelen hacer? Las tres son comparaciones, pero solo en una de ellas estabas tú.

Abre lo que te nombren. Que una fuente aparezca en la respuesta no la hace cierta ni aplicable. La herramienta la marca "con respuesta" cuando te la nombran; eres tú quien abre el documento y mira si dice lo que dicen que dice.

Un matiz que la propia página de Anthropic deja a la vista, sin que sea una crítica: las especificaciones contra las que se comprobaron las pruebas salieron de pruebas que los desarrolladores ya tenían, y la página dice que un verificador de pruebas "no puede decirte si tu especificación coincide con la realidad". Es la pregunta 2 en limpio: una comprobación vale lo que vale aquello contra lo que se hizo.

Es la que más te sirve. Toda comprobación tiene un borde. Lo que cambia es si alguien lo escribió.

Tres respuestas posibles:

• Lo dicen ellos. El mismo que afirma te cuenta qué no entró.
• Lo dice un tercero. Otra persona, otra fuente, un informe aparte.
• No lo dicen. Nadie, en lo que te entregaron.

Las dos primeras cuentan como respuesta. La tercera es el hueco.

Un ejemplo con fuente. METR publicó el 22 de octubre un ejercicio piloto de pruebas de estrés al sistema con el que OpenAI vigila a sus agentes internos. En esa página METR escribe que sus hallazgos describen el sistema "on and before July 21st" (el 21 de julio y antes), que OpenAI tachó detalles de exploits y que una versión tachada de 38 páginas se compartió con los equipos de dirección de METR y de Redwood, que solo publican una parte del informe, y, sobre lo que OpenAI dice haber arreglado: "We have not evaluated these claims" (no hemos evaluado esas afirmaciones). Aquí hay un borde escrito, y dicho por un tercero. No es un juicio sobre OpenAI ni sobre METR: es lo que se ve cuando alguien escribe el borde.

Lo importante de la pregunta 3 es el "quién". Un borde que escribe el que afirma viene de una sola parte. Un borde que escribe un tercero pesa distinto. La herramienta no pone una por encima de la otra: te deja saber cuál tienes.

Si lo mandas con tono de reclamo, la respuesta será defensiva. Lo que funciona es una frase que diga qué vas a hacer con la respuesta: apoyarte en ella.

El mensaje que arma la herramienta tiene siempre la misma forma, y la guía te lo da para que lo escribas tú aunque no la uses.

Apertura. "Sobre lo que recibimos de un proveedor de software o IA, marcado con la palabra 'verificado': antes de apoyarme en eso necesito tres respuestas por escrito."

Por qué así: cita la palabra, dice de dónde vino por tipo (sin nombres), y dice para qué lo quieres: apoyarte. "Por escrito" importa, porque una respuesta de pasillo no se puede abrir ni reenviar.

Una línea por cada pregunta que falte. Solo las que faltan. Si ya te dijeron qué revisaron, no lo preguntes otra vez.

1. "¿Qué parte exacta se comprobó, y con qué alcance?"
2. "¿Contra qué se comparó? Necesito una fuente o norma que pueda abrir." Si te dijeron que fue un criterio propio: "Fue contra su propio criterio: ¿me lo pueden mostrar, o indicarme una fuente o norma que pueda abrir?"
3. "¿Qué quedó fuera de la comprobación, y quién lo dice: ustedes o un tercero?"
4. (Solo si hay dos idiomas) "La afirmación está en inglés y mi trabajo está en español: ¿la comprobación se hizo en los dos?"

Cierre. "Si algo no se revisó, dímelo tal cual: me sirve más saberlo que no."

Ese cierre hace el trabajo de bajar la guardia. Le da permiso al otro de decir "esto no lo cubrimos" sin que suene a confesión.

Si no usas la herramienta: copia la apertura y las líneas que te falten, cambia la palabra y el tipo de fuente, y manda. Si el tuyo es un mensaje de WhatsApp a una persona, acórtalo; lo que no se acorta son las preguntas.

Escribe en el idioma de la afirmación. Si te llegó en inglés, pregunta en inglés. La herramienta saca el mensaje en el idioma de la afirmación aunque la página la estés leyendo en otro.

Te van a contestar de una de tres formas.

1. Nombra. Te dicen qué, contra qué y qué quedó fuera, aunque sea en dos líneas. Pasa a la parte 8: ya tienes con qué decidir. Y abre lo que te nombraron.

2. Repite la palabra. "Sí, está verificado." "Lo revisamos a fondo." Te contestaron la pregunta que no hiciste. Mucha gente no tiene a mano lo que se hizo. Vuelve a preguntar una sola cosa, la más importante, con las mismas palabras. Si lo que más te importa es qué quedó fuera, pregunta solo eso.

3. Calla. No hay respuesta. El silencio no prueba nada: puede ser un buzón lleno, una persona de vacaciones o que nadie sepa. No lo leas como confesión. Sí es información sobre cuánto puedes apoyarte hoy: tienes una afirmación abierta y no tienes cómo cerrarla. Decide con eso (parte 8).

Una respuesta que nombra y que te sorprende (porque dejaron fuera algo que dabas por cubierto) es la respuesta que más valía la pena conseguir. Es justo lo que buscaba la pregunta 3.

Si tu proveedor te manda la afirmación en inglés y tu contrato, tu cliente o tu equipo trabajan en español, la pregunta es si la misma cosa se comprobó en los dos idiomas. No es una pregunta rara: un texto, una interfaz, una respuesta de una herramienta o un documento legal pueden funcionar en un idioma y fallar en otro.

Imagina a un conferencista que contrata una herramienta de subtítulos y recibe un informe en inglés que dice "probado". Su público está en español. "Probado" ¿en qué idioma? La respuesta que le sirve es "se probó con audio y texto en español, estos son los casos"; la que no le sirve es "es un modelo multilingüe", porque ese es otro tipo de afirmación: dice qué puede hacer la herramienta, no qué se comprobó.

La herramienta marca el idioma como pendiente cuando la afirmación y tu trabajo están en idiomas distintos y no te dicen que lo comprobaron en los dos. La respuesta que cierra la pregunta es la que nombra los dos idiomas, no la que dice "funciona en todos".

Ya tienes las respuestas, o te falta alguna. Decides tú, y la decisión depende de cuánto te cuesta equivocarte. La herramienta te pide ese dato (bajo, medio o alto) y lo usa solo para ordenar qué pedir primero.

Cuatro caminos, de menos a más estricto:

• Lo aceptas. Lo que dejaron fuera no toca lo que vas a hacer. Anota dónde está el borde, para acordarte cuando cambie lo que haces.
• Pides más. Hay una parte que sí te toca y no está cubierta. Preguntas por esa parte, una sola cosa.
• Lo usas solo donde equivocarte sale barato. Para lo que arreglas tú en una tarde, sí. Para lo que afecta a un cliente, un contrato o a otra persona, todavía no.
• No lo usas. Si lo que quedó fuera es justo lo que necesitas y no pueden cubrirlo, esa es la respuesta.

Ninguno es el correcto en general. El que te toca es el que cuadra con tu riesgo.

• No mide si la afirmación es cierta. Nombrar una fuente no la vuelve verdadera: ábrela.
• No mide si el proveedor es honesto. Un proveedor puede no tener a mano lo que pides y ser honesto. Otro puede contestar de maravilla y estar equivocado.
• "Completa" no es "buena". Quiere decir que las preguntas tienen respuesta, no que las respuestas te convengan.
• El silencio no es prueba de nada. Ya lo dijimos; vale repetirlo.
• No compara proveedores ni da un puntaje. No hay una tasa buena de afirmaciones completas. Con una afirmación y tres preguntas no se puede decir nada de nadie más.

Una afirmación, un mensaje. Esta semana no hace falta hacer más. Si la respuesta llega, léela con la parte 6 y decide con la parte 8. Si no llega, tienes una afirmación abierta anotada, que ya es más de lo que tenías.

La nota para llenar

Copia esta nota una vez por afirmación:

Qué recibí: ______________________ - De quién (tipo): ______________ - La palabra: ______________

Qué se comprobó (pregunta 1): [con nombre y alcance] [general] [no dicen]

Contra qué (pregunta 2): [fuente o norma que puedo abrir] [su propio criterio] [no dicen]

Qué quedó fuera (pregunta 3): [lo dicen ellos] [lo dice un tercero] [no lo dicen]

Idioma: la afirmación está en ______ - mi trabajo en ______ - [comprobado en los dos] [solo en uno] [no dicen]

Si me equivoco, ¿qué pasa? [lo arreglo yo en una tarde] [me cuesta dinero o un cliente] [afecta a otra persona, a un contrato o a la ley]

Lo que voy a pedir: __________________________________

Lo que decido con lo que dejaron fuera: [lo acepto] [pido más] [lo uso donde sale barato] [no lo uso]

Lo que queda fuera de esta guía

Contar cuánto usas de lo que te entrega la IA, y decidir quién debe revisar a quien construye. Son otras preguntas, y esta guía no las responde.

La herramienta. Para esto está Las tres preguntas del verificado, la herramienta que viene con esta guía: marcas, por cada afirmación, qué te contestaron en cada pregunta, y te devuelve lo que falta y el mensaje listo para mandar.

Lo último

Para empezar basta una afirmación. Busca ahora la última palabra del tipo "verificado" o "revisado" que te llegó esta semana, y contesta las tres preguntas. Si alguna queda sin respuesta, ya sabes qué escribir.

Una palabra te dice que alguien afirma algo. Las tres preguntas te dicen qué.

¿Te ayudamos a leer tus afirmaciones? Tráelas a una llamada gratuita y empezamos por lo que tengas por escrito de tu proveedor.

Agenda una llamada gratuita

Los viernes a las 4 de la tarde, hora del Este, sale The AI Edge: una idea de IA que puedes usar esa misma semana. Suscríbete aquí.