A quién le sirve. Quien quiere evaluar un agente de IA con tareas de programación antes de confiarle trabajo real, aunque no programe a diario.
Qué hicieron
El revisor le dio a Manus ocho instrucciones independientes en septiembre de 2025. Incluían un conversor de divisas en Python, una función find_max con errores, una explicación del ordenamiento de burbuja, una página de inicio, una base en React y un juego de Adivina quién. Cada resultado se puntuó con las mismas comprobaciones: si se ejecutaba, los casos límite, la validación, la explicación, la accesibilidad y un ejemplo de salida.
Cómo salió
Manus sacó una media de 4,69 sobre 5 y un 5 en cuatro tareas, entre ellas el arreglo de find_max, donde encontró los tres errores. Perdió puntos por saltarse explicaciones, no ejecutar nunca su JavaScript, una validación de correo floja y un Adivina quién que solo entendía preguntas por palabras clave.
Conviene saber
Las pruebas se hicieron con una versión temprana de Manus, anterior a la 1.5 y la 1.6. Todos los puntos perdidos eran cosas que detectaría la revisión de un programador, así que cuenta con una pasada de revisión.
Qué necesitas
- Una cuenta de Manus
- Entre cinco y ocho tareas de programación pequeñas, con resultado comprobable
- Una lista de criterios de puntuación iguales para todas las tareas
- Un entorno donde ejecutar el código que genere, o alguien que lo revise
Cómo hacerlo tú, paso a paso
- Elige varias tareas pequeñas e independientes, como un conversor, el arreglo de una función con errores, una explicación y una página sencilla.
- Define los mismos criterios para puntuar cada resultado: si se ejecuta, casos límite, validación, explicación, accesibilidad y ejemplo de salida.
- Dale cada tarea a Manus con el prompt de la ficha.
- Ejecuta tú el código y prueba los casos límite.
- Puntúa cada resultado con los mismos criterios y apunta qué se saltó, como explicaciones o validación floja.
- Decide a partir de las puntuaciones qué tipo de tareas le vas a dar y cuáles no.
Escribe un programa en [lenguaje] que [descripción de lo que debe hacer]. Incluye validación de los datos de entrada, tratamiento de los casos límite como [casos límite] y comentarios que expliquen cada parte. Ejecútalo con un ejemplo y enséñame la salida. Habrás terminado cuando el programa funcione con tus ejemplos y con [casos de prueba que yo te doy]. Dime al final qué partes no has podido probar.
Consejos
- Usa los mismos criterios para todas las tareas. Así puedes comparar de verdad.
- Pídele siempre que ejecute su propio código y te enseñe la salida. En la prueba, Manus a veces no ejecutaba su JavaScript.
- Todos los puntos perdidos eran cosas que detectaría un programador. Cuenta con una pasada de revisión.
Preguntas frecuentes
¿Puedo hacer la misma prueba con otro agente?
Sí. Lo valioso es el método: las mismas tareas y los mismos criterios para todos los agentes que compares.
¿Quién revisa el código si no programo?
Pide a alguien de confianza que lo revise o utiliza otra IA como revisora. Aun así, prueba tú que el resultado funciona.
Fuentes
En el directorio desde el 3 de octubre de 2026.