Anthropic presentó Claude Sonnet 5.5 el 28 de septiembre con mejoras de velocidad y eficiencia frente a Sonnet 5, según el anuncio de la empresa. Para quienes usan IA en tareas habituales, el lanzamiento plantea una pregunta práctica: cómo evaluar esas mejoras en el trabajo que necesitan resolver.
Precio por token y costo por tarea
Anthropic distingue el precio por unidad de texto procesada del costo de completar una tarea. Una herramienta puede necesitar menos pasos o menos texto para responder. Eso no significa, por sí solo, que baje el precio de una suscripción. Al comparar una novedad, conviene comprobar qué está midiendo cada cifra.
Una comparación que puedas revisar
Mi propuesta es elegir una tarea cuyo resultado conozcas. Por ejemplo, resumir una página de apuntes sin datos personales. Usa el mismo documento y pide la misma extensión a los modelos que quieras comparar. Así tendrás un punto de partida común y podrás volver al original para verificar la respuesta.
Antes de leer los resultados, escribe qué debe aparecer en un buen resumen. Incluye los conceptos esenciales y cualquier dato que no debería cambiar. Esa pequeña pauta ayuda a valorar el contenido sin dejar que una presentación atractiva decida por ti.
Cuenta también el trabajo de corregir
Anota las omisiones, los datos alterados y las frases que necesites reescribir. Si vas a medir tiempo, empieza al preparar la solicitud y termina cuando tengas una versión que realmente usarías. Una respuesta rápida que exige muchas correcciones puede no resolver tu necesidad.
Repetir una tarea permite observar diferencias, pero no convierte una comparación personal en una evaluación de todos los usos posibles. Una herramienta puede servirte para organizar ideas y resultar menos adecuada para otra actividad. Es mejor describir lo que ocurrió en ese encargo concreto.
Qué tener en cuenta al comparar
Las cifras del anuncio corresponden a las evaluaciones de Anthropic. Para valorar la utilidad de una herramienta en una tarea concreta, conviene registrar qué se pidió, qué respondió y qué correcciones fueron necesarias.
Nota de verificación
Para esta publicación utilicé un entorno que permite consultar varios modelos de IA como apoyo a la verificación.