Hugging Face añade visión a sus hojas con IA

Hugging Face ha actualizado AI Sheets para que puedas trabajar con imágenes dentro de una hoja de cálculo, sin escribir código. La herramienta ahora analiza fotos, recibos y documentos, extrae sus datos, genera imágenes nuevas y transforma las existentes usando modelos abiertos de IA.

AI Sheets funciona como una hoja de cálculo en la que cada columna puede convertirse en una acción de IA. Puedes subir imágenes directamente o usar un conjunto de datos que ya las incluya, escribir una instrucción y dejar que el modelo cree una nueva columna con el resultado.

La plataforma utiliza miles de modelos disponibles a través de Inference Providers, servicios que ejecutan los modelos por ti. Así puedes elegir entre opciones más rápidas, modelos especializados o sistemas con mayor capacidad de razonamiento, sin instalar toda la infraestructura necesaria para ejecutarlos.

De una imagen a una tabla útil

La función de visión permite convertir información visual en datos estructurados. Por ejemplo, puedes subir una carpeta con recibos y pedirle a AI Sheets que extraiga:

• Nombre del comercio
• Fecha de compra
• Importe total
• Categoría del gasto

El resultado aparece en columnas que puedes revisar, corregir y exportar como CSV o Parquet. Esto puede ahorrarte horas de introducir datos a mano cuando tienes que organizar gastos, inventarios o documentos antiguos.

También sirve para digitalizar recetas manuscritas. En una demostración, Hugging Face usa fotografías de recetas antiguas para extraer ingredientes, cantidades, tiempos de cocción y otros detalles. La instrucción predeterminada transcribe todo el texto visible, incluidos encabezados y anuncios que no forman parte de la receta.

Al cambiarla por una indicación más concreta, como pedir únicamente los ingredientes y las instrucciones, el resultado se vuelve mucho más útil. La diferencia es importante: la IA no sabe automáticamente qué parte de una imagen te interesa. La calidad depende también de cómo formules la tarea.

Puedes revisar y mejorar los resultados

Cada acción combina una instrucción y un modelo. Si la respuesta contiene un error, puedes editarla manualmente, marcar los resultados correctos con un pulgar hacia arriba y volver a generar los demás. Esas correcciones se convierten en ejemplos para orientar mejor las siguientes respuestas.

La herramienta incluye acciones para describir y clasificar imágenes, detectar objetos, extraer texto, hacer preguntas sobre una imagen, traducir contenido o añadir etiquetas y metadatos. En las columnas de texto también puedes resumir, extraer palabras clave o transformar la información en otro formato.

El modelo visual predeterminado del ejemplo es Qwen/Qwen2.5-VL-7B-Instruct, elegido por su equilibrio entre velocidad y precisión. También puedes probar modelos más grandes, como Qwen/Qwen3-VL-235B-A22B-Reasoning, cuando la imagen sea más difícil de interpretar. En una receta compleja, ambos modelos produjeron resultados parecidos, pero difirieron en detalles relevantes, como un ingrediente y la temperatura de cocción.

Eso recuerda una limitación básica: una extracción automática debe revisarse antes de usarla para tomar decisiones o publicar información. Un modelo puede leer una palabra de forma incorrecta aunque el resto del resultado parezca convincente.

Generar imágenes desde la misma hoja

AI Sheets no solo analiza imágenes. También puede crearlas y editarlas a partir de texto.

Imagina una hoja con los títulos de un calendario de publicaciones sobre recetas saludables. Puedes añadir una columna con una instrucción como: generar una fotografía apetecible del plato, con luz natural y una vista desde arriba. La herramienta creará una imagen para cada fila.

Después puedes añadir otra acción para cambiar el fondo, incorporar ingredientes o producir distintas versiones de una misma imagen. Modelos de edición como Qwen-Image-Edit permiten modificar fotografías generadas o subidas a la plataforma.

El resultado es un flujo completo en un solo lugar: texto, imágenes, revisiones y exportación. Cuando el conjunto de datos está listo, puedes enviarlo a Hugging Face Hub, hacerlo privado o compartirlo con una organización.

AI Sheets es de código abierto y se puede probar sin instalar nada. También puedes ejecutarlo localmente desde su repositorio de GitHub. Hugging Face recomienda el plan PRO para quienes necesiten 20 veces más uso mensual de inferencia, es decir, más capacidad para procesar consultas con modelos de IA.

La novedad importante no es solo que una hoja pueda ver imágenes. Es que tareas que antes exigían programación, herramientas separadas y bastante trabajo manual ahora pueden organizarse como columnas, instrucciones y revisiones. Aun así, la precisión seguirá dependiendo del modelo elegido, la calidad de la imagen y la revisión humana de los resultados.