En resumen
- Una calificación dice lo bien que se ha puesto a prueba una afirmación. No dice lo grande que es el beneficio.
- Hay cuatro niveles, de Sólida a Práctica habitual.
- Dos avisos le alertan cuando los estudios no coinciden o cuando los resultados dependen de las condiciones.
- Los anuncios de las empresas no son evidencia. Los ejemplos prácticos tampoco.
- Cada afirmación enlaza con su fuente, para que usted pueda comprobarla.
Los cuatro niveles
Primero, dos términos. Un estudio riguroso compara a personas o equipos que aplicaron una práctica con otros parecidos que no la aplicaron. Contamos dos tipos. En un ensayo controlado, los investigadores deciden quién recibe la nueva herramienta o el nuevo método. En un experimento natural, un cambio llega a unos grupos antes que a otros, y los investigadores los comparan.
Un ejemplo de estudio riguroso: un estudio del trabajo real en una empresa, con más de 5000 agentes de atención al cliente, encontró que los agentes con un asistente de IA resolvían alrededor de un 14 % más de incidencias por hora (Brynjolfsson, Li and Raymond).
-
Varios estudios rigurosos, hechos por equipos distintos, llegan al mismo resultado. Se hicieron en condiciones parecidas a las de una empresa normal.
Ejemplo. Tres equipos de investigación hacen cada uno un ensayo controlado en empresas reales. Los tres encuentran el mismo efecto.
-
Un estudio riguroso. O varios estudios o grandes encuestas que coinciden entre sí y explican sus métodos con claridad.
Ejemplo. Un gran estudio de campo en un lugar de trabajo real, con una comparación clara entre el personal que tenía una herramienta de IA y el que no.
-
Varios casos documentados de empresas muestran resultados parecidos, con cifras. Nadie los comparó con un grupo que no aplicara la práctica.
Ejemplo. Cinco empresas publican cifras de antes y después del mismo cambio. Ninguna tenía un grupo de comparación.
-
La recomienda mucha gente que hace este trabajo. Ningún estudio publicado la ha puesto a prueba todavía.
Ejemplo. Un consejo que repiten muchos directivos con experiencia, pero que ningún estudio publicado ha puesto a prueba.
Práctica habitual no significa un consejo débil. Significa que muchos directivos con experiencia lo recomiendan y que nadie lo ha puesto a prueba todavía en un estudio publicado.
Las evaluaciones, como los cuestionarios y las pruebas de conocimiento, usan los mismos cuatro niveles. En ellas el nivel más bajo aparece como “Aún sin probar”: nadie ha publicado una prueba de que la evaluación mida lo que dice medir. Qué significan los niveles en una evaluación.
Dos avisos
Un aviso aparece junto a la calificación. Le indica que lea los detalles antes de actuar.
-
Controvertida
Los estudios no coinciden. Mostramos las dos posturas y no elegimos ninguna.
Ejemplo. Un estudio encuentra una mejora clara. Otro de calidad parecida no encuentra ninguna.
-
Depende del contexto
La práctica ayuda en unas condiciones y perjudica en otras. La página dice en cuáles.
Ejemplo. La ayuda de la IA mejora los resultados en las tareas que la IA hace bien y los empeora en las que hace mal.
Lo que una calificación no le dice
- Lo grande que es la mejora. Una calificación Sólida significa que el hallazgo está bien probado. La mejora en sí puede ser pequeña.
- Si encaja en su empresa. Un estudio hecho en grandes empresas puede no valer para una empresa de 20 personas. Cada página dice de dónde viene la evidencia.
- Lo que cuesta. El costo y el esfuerzo se describen aparte de la calificación.
- Lo útil que es. Una práctica con un punto puede ser el primer paso correcto. Los puntos solo dicen cuántas pruebas la respaldan.
Prioridad y esfuerzo
Cada práctica muestra también cuándo adoptarla y cuánto esfuerzo requiere. Estas dos etiquetas son nuestro criterio editorial. No son evidencia y no cambian la calificación.
- Hacer primero. Antes de empezar con la IA, o al empezar.
- Hacer después. Cuando sus primeros usos de la IA ya estén en marcha.
- Hacer más adelante. Cuando la IA ya sea parte habitual del trabajo.
- Esfuerzo: bajo. Días, una persona.
- Esfuerzo: medio. Semanas, unas pocas personas.
- Esfuerzo: alto. Meses, varios equipos.
Fijamos las dos para una empresa típica, a partir de los pasos de la página de la práctica. Su propio orden puede ser distinto. Cada página de práctica dice qué cambia según el tamaño de la empresa.
Lo que no cuenta como evidencia
Los comunicados y anuncios de las empresas son señales
Un comunicado interno le dice lo que una empresa pretende hacer. No le dice si funcionó. En abril de 2025, por ejemplo, el consejero delegado de Shopify pidió a los equipos que demostraran por qué la IA no podía hacer un trabajo antes de pedir más personal (el comunicado). Eso es una declaración de intenciones. No es un resultado.
Registramos anuncios como este como señales. Una señal nunca respalda una calificación.
Los ejemplos prácticos son ilustraciones
Un ejemplo práctico muestra cómo se aplica un método, paso a paso. Puede usar una empresa ficticia. Le ayuda a imaginarse el trabajo. No demuestra que el método dé resultados, así que no lleva calificación y nunca respalda ninguna. Una práctica puede enlazar con uno para mostrar cómo se ve en uso. Vea los ejemplos prácticos.
Las cifras que una empresa da sobre sí misma se señalan
Algunas cifras vienen solo de la empresa que describen, o del proveedor que vendió la herramienta. Lo indicamos dondequiera que aparezca una cifra así.
Lo mismo vale para los casos de empresas. Un caso es una empresa con nombre, con cifras y una fuente pública. No lleva calificación. Los casos que las empresas cuentan sobre sí mismas pueden respaldar como máximo una calificación Emergente, y solo cuando varios coinciden.
Cómo decidimos una calificación
- Reunimos las fuentes publicadas sobre una práctica o una evaluación.
- Leemos cada fuente completa. Una calificación nunca se basa en una fuente que no hayamos leído.
- Anotamos cómo se hizo cada estudio, quién participó y dónde dejan de aplicarse sus resultados.
- Comparamos las fuentes con los cuatro niveles de arriba y añadimos un aviso si corresponde.
- Enlazamos cada afirmación con su fuente.
Cada cuánto revisamos
- Cada página muestra la fecha de su última revisión.
- Revisamos cada página calificada al menos una vez cada 12 meses.
- Revisamos una página antes cuando aparece un estudio nuevo importante.
- Una calificación puede subir o bajar después de una revisión.
Versión y cambios
Esta es la versión 1.1 del método. Cada cambio se recoge aquí.
- Versión 1.1 ·
-
- El nivel más bajo se llama ahora “Práctica habitual”. Antes se llamaba “Opinión de profesionales”. Lo que cuenta para cada nivel no ha cambiado.
- En las evaluaciones el nivel más bajo aparece como “Aún sin probar”. El nivel y lo que cuenta para él son los mismos.
- Versión 1.0 ·
-
- Primera versión publicada.
- Cuatro niveles de evidencia y dos avisos.
- Reglas para los anuncios de las empresas y para los ejemplos prácticos.
- Intervalo de revisión fijado en 12 meses.