Edición de imágenes
Usuarios de Reddit construyeron un editor de imágenes que supera a los laboratorios en su propio juego
RealEdit, un conjunto de datos de 48.000 solicitudes reales de edición de imágenes de Reddit, muestra que los modelos actuales rinden por debajo en tareas reales de usuarios. Un modelo entrenado con estos datos supera a los competidores por hasta 165 puntos Elo, y también aumenta la precisión de la detección de deepfakes en 14 puntos porcentuales.
Los puntos de referencia académicos pueden ser engañosos. Los modelos de edición de imágenes que encabezan las tablas clasificatorias a menudo fallan al enfrentarse al desorden de las solicitudes reales de los usuarios. Un nuevo conjunto de datos llamado RealEdit busca cerrar esa brecha. Se construyó a partir de miles de conversaciones auténticas de edición en Reddit, proporcionando a los investigadores tanto un conjunto de prueba de 9.300 ejemplos como 48.000 pares de entrenamiento. Todos ellos reflejan la intención humana real, no indicaciones sintéticas.El atlas de datos de Nvidia muestra por qué los datos…
Los investigadores encontraron que los modelos disponibles comercialmente rinden por debajo en estas tareas del mundo real. Así que entrenaron su propio modelo con el conjunto de entrenamiento de RealEdit. En evaluaciones humanas, obtuvo hasta 165 puntos Elo más que los competidores. En la métrica automatizada VIEScore, mostró una mejora relativa del 92%. El equipo implementó el modelo en vivo en Reddit, donde los usuarios respondieron positivamente. Ese tipo de validación práctica es algo que los resultados de laboratorio rara vez capturan.olmo-eval de Ai2 brinda a los desarrolladores de LLM un…
"Los modelos existentes aún no han sido ampliamente adoptados para las necesidades reales de los usuarios", señala el equipo. Los conjuntos de datos actuales utilizan ediciones artificiales. Carecen de la escala y la validez ecológica necesarias para abordar la verdadera diversidad de las solicitudes de los usuarios. RealEdit cambia eso al obtener ediciones que las personas realmente querían y realizaron por sí mismas.
Más allá de la edición de imágenes: avances en la detección de deepfakes
Uno de los hallazgos más sorprendentes es la transferibilidad de RealEdit. Los investigadores trabajaron con una organización sin fines de lucro de detección de deepfakes para ajustar su modelo de detección con datos de RealEdit. El resultado: una mejora de 14 puntos porcentuales en la puntuación F1. Esto sugiere que el conjunto de datos captura patrones de manipulación realistas que se generalizan más allá de los arreglos fotográficos casuales hacia el ámbito forense.Quince artículos sobre generación de IA revelan tres…
El momento es importante. La IA generativa hace que la manipulación de imágenes sea más fácil y más difícil de detectar. Los detectores entrenados con falsificaciones sintéticas pueden no resistir la presión del mundo real. RealEdit ofrece una alternativa: rastros auténticos de la intención de edición humana que pueden ser más difíciles de eludir para los adversarios.Los modelos de IA no pueden dejar de pensar en voz…
El artículo está en arXiv bajo el identificador 2502.03629. El conjunto de datos está disponible como peter-sushko/RealEdit. Juntos, abren la puerta a tuberías de entrenamiento más ecológicamente válidas. Para los investigadores que trabajan en modelos generativos, es un recordatorio de que lo que los usuarios realmente quieren editar y lo que los puntos de referencia prueban no siempre son lo mismo.M3D y Real-Guidance llevan la destilación de conjuntos…
El equipo de RealEdit planea seguir expandiendo el conjunto de datos e invita a contribuciones de la comunidad. El objetivo es seguir cerrando la brecha entre el rendimiento de laboratorio y la utilidad en el mundo real.