SevenTnewS

Interacción visual con IA

Cursor acaba de dar a los desarrolladores una forma más inteligente de decirle a la IA qué corregir: apuntar a ello

El modo de diseño actualizado de Cursor permite a ingenieros y diseñadores modificar la interfaz haciendo clic en elementos, dibujando sobre la página o diciendo los cambios en voz alta, mientras que el agente de IA extrae la identidad del elemento, los estilos y el contexto de diseño para editar el código. El enfoque acelera la iteración al alinear el ritmo del modelo con la rapidez con que los humanos detectan y actúan sobre problemas visuales.

Emmanuel Fabrice Omgbwa Yasse

2026-07-12 · 4 min de lectura

Cursor acaba de dar a los desarrolladores una forma más inteligente de decirle a la IA qué corregir: apuntar a ello

Cursor ha actualizado su Modo de Diseño con herramientas de interacción visual que permiten a los desarrolladores señalar, dibujar o decir modificaciones directamente en una vista de navegador en vivo de su producto. La actualización busca reducir la fricción entre lo que un humano ve en pantalla y lo que un agente de IA entiende sobre el código subyacente. vibe-coding-works-but-the-technical-debt-nobody-talks-about-could-sink-your-project

Del chat al diálogo espacial

El chat sigue siendo la interfaz dominante para los agentes de codificación con IA, pero el trabajo de diseño es espacial. Los diseñadores, gerentes de producto y desarrolladores frontend se comunican mediante anotaciones: señalando elementos, áreas o estados de página específicos. El Modo de Diseño de Cursor formaliza esto. En lugar de describir un cambio solo con texto, el usuario identifica el objetivo visual en la página, y el agente extrae automáticamente el contexto de código correspondiente. microsofts-bet-on-small-models-for-agentic-ai-is-about-orchestration-not-knowledge

Cuando el usuario selecciona un elemento, el agente recibe dos señales: la identidad del elemento, xpath, nombre del componente, atributos, estilos calculados, propiedades del árbol fiber y una captura de pantalla para contexto espacial, diseño, elementos circundantes y el estado exacto de la página. El agente usa esas señales para encontrar el origen y aplicar el cambio.

Tres métodos de entrada para una sola intención

El Modo de Diseño ofrece varias formas de comunicar la intención:

  • Seleccionar uno o varios elementos. Esto permite cambios que dependen de relaciones entre componentes, alinear elementos, eliminar contenido duplicado o ajustar un grupo conjuntamente.
  • Dibujar sobre la página para marcar una región, rodear una sección o encuadrar un área animada. La anotación se superpone a una imagen congelada del viewport, por lo que el agente ve el estado exacto de la página en el momento de la instrucción.
  • Decir una modificación. Los comandos de voz permiten al usuario describir el cambio mientras selecciona el objetivo visual.

Señalar y narrar juntos reflejan cómo los equipos ya revisan diseños en solicitudes de extracción o herramientas de diseño colaborativo. Pero ahora el ciclo entre detectar un problema y aplicar la corrección se acorta porque el modelo opera directamente sobre el producto en ejecución.

Alineando el modelo con el flujo de trabajo

El Modo de Diseño está construido para un flujo multitarea. Un usuario puede señalar un elemento, describir el cambio, moverse a otra parte de la página y enviar otra modificación antes de que la anterior termine. Cursor ejecuta múltiples subagentes en segundo plano, recargando la aplicación en caliente a medida que cada tarea se completa. why-parallel-agents-are-the-next-battleground-for-ai-orchestration

Cursor recomienda Composer 2.5 para este flujo de trabajo, calificándolo como rápido y efectivo para trabajo de interfaz. La capacidad del modelo para realizar cambios específicos y acotados se ajusta al patrón de iteración rápida que permite el Modo de Diseño.

"Creemos que el futuro del desarrollo de software permitirá a los usuarios moverse fluidamente entre niveles más altos de abstracción y detalles de bajo nivel, permaneciendo en un estado de flujo cuando lo deseen", escribió la compañía en su anuncio.

Implicaciones para el desarrollo frontend

La anotación visual como mecanismo de control para agentes de IA puede parecer una pequeña mejora de UX, pero cambia la forma en que los desarrolladores interactúan con los modelos de codificación. Las interfaces tradicionales de agentes dependen de la capacidad del usuario para articular cambios de código en lenguaje natural. Eso funciona para cambios funcionales, pero es impreciso para ajustes visuales: describir un cambio de espaciado de 4 píxeles o una sombra de caja específica requiere medición o capturas de pantalla que el agente pueda analizar.

Al proporcionar al agente tanto la identidad del elemento como su contexto espacial, Cursor reduce la ambigüedad en las solicitudes de cambios visuales. El usuario no necesita traducir una observación espacial a texto. La anotación misma lleva el significado.

Interacción espacial como nuevo paradigma

El Modo de Diseño no es la primera herramienta que ofrece bucles de retroalimentación visual para la codificación con IA. El espacio de trabajo de GitHub Copilot y Ghostwriter de Replit han experimentado con ventanas de contexto que incluyen árboles de archivos y selecciones en el editor. Pero el enfoque de Cursor difiere en dos aspectos: opera sobre el producto en vivo y en ejecución, no sobre el código en un árbol de archivos, y trata la vista del navegador como una superficie editable donde la entrada visual del usuario se analiza en señales estructuradas para el agente. cursor-expands-team-marketplaces-with-mcp-servers-and-org-group-access

Este flujo de trabajo espacial basado en anotaciones puede resultar valioso para equipos donde no desarrolladores, diseñadores o gerentes de producto, inician o revisan cambios frontend. Si un diseñador puede rodear un área en la vista del navegador y decir "haz esta sección más estrecha" sin abrir un chat de texto, la barrera para delegar cambios de código a un agente disminuye significativamente. the-migration-isnt-finished-until-the-build-server-says-it-is-why-ai-agents-keep-failing-at-enterprise-java

Si esto reduce el número de rondas de traspaso entre diseño e ingeniería, o simplemente desplaza el cuello de botella, depende de cuán confiablemente el agente interprete las anotaciones y de cuán cómodos se vuelvan los equipos con modificaciones de interfaz impulsadas por agentes. La actualización de Cursor apuesta a que la respuesta es más visual y menos textual.

El Modo de Diseño ya está disponible en la ventana del agente de Cursor. La compañía ha publicado documentación para la función de Navegador y puso a disposición la última versión del editor para descarga.