OpenAI lanza un clasificador de imágenes y advertencias en ChatGPT contra el abuso sexual infantil

Hecho Qué ha ocurrido
OpenAI anunció herramientas contra el material de abuso sexual infantil (CSAM), entre ellas un clasificador de imágenes que ofrece sin coste a algunas empresas a través de su API, desarrollado con el NCMEC. Según sus pruebas iniciales con socios, marca un 48% menos de imágenes manteniendo el mismo número de abusivas. ChatGPT mostrará alertas, redirigirá a apoyo especializado y suspenderá la cuenta 24 horas ante peticiones que sexualicen a menores.
Resumen generado mediante IA a partir de TechCrunch AI (original en inglés). Naturaleza de la información: declaración de parte interesada.
Análisis Por qué importa
Para empresas que desarrollan o alojan productos de IA con contenido generado por usuarios, los controles de seguridad infantil empiezan a ser una referencia de práctica y de riesgo reputacional y legal. Las herramientas de detección también pueden integrarse en sus propios sistemas de moderación.
- Quién se ve afectado
- Plataformas que alojan contenido generado por usuarios, desarrolladores que usan APIs de OpenAI y equipos de moderación y cumplimiento.
- Qué puede cambiar
- Los desarrolladores disponen de pautas para prevenir y reportar CSAM, y algunas empresas podrán usar el clasificador sin coste. Los cuerpos de seguridad reciben herramientas de análisis asistidas por IA.
Análisis generado a partir de la información disponible; no procede de la fuente.
Predicción Qué observar a continuación
Si el clasificador se amplía a más socios y si los datos de reducción de falsos positivos se confirman con evaluaciones independientes. También conviene vigilar la reacción regulatoria ante los casos de uso de imágenes generadas por IA.
Enviar esta noticia por correo
Enviado. Revisa que llegue a la bandeja de entrada de quien lo reciba.
La dirección no parece válida.
Has enviado varios correos seguidos. Espera un rato.
No se ha podido comprobar que no eres un robot. Vuelve a intentarlo.
No se ha podido enviar. Inténtalo de nuevo en unos minutos.
Fuente original: TechCrunch AI. La referencia es siempre el artículo original.
Ver fuente original ↗clasificador de imágenesvisión por computador OpenAINCMEC ChatGPT moderación NCMEC OpenAI seguridad infantil
Forma parte de la historia OpenAI amplía herramientas contra el abuso sexual infantil (4 noticias, estado: evolución rápida).
Relacionadas
OpenAI suspenderá 24 horas el acceso a quien busque material de abuso sexual infantil y lanza un detector de imágenes
OpenAI anunció que ChatGPT mostrará una advertencia, borrará la conversación y pausará la cuenta 24 horas a quien intente encontrar material de abuso sexual…
Por qué importaMuestra cómo los proveedores de IA están endureciendo las salvaguardas de sus productos de consumo y ofreciendo herramientas de detección a terceros…
OpenAI lanza un clasificador para detectar material de abuso infantil, incluido el generado con IA
OpenAI anunció en una rueda de prensa en Washington un clasificador que, según afirma, detecta mejor imágenes de abuso sexual infantil, incluido si han sido…
Por qué importaMuestra cómo los proveedores de modelos asumen herramientas de moderación para reducir el volumen de material falso en las líneas de denuncia. Para…
OpenAI anuncia nuevas herramientas y colaboraciones contra el abuso sexual infantil en línea
OpenAI anunció nuevas herramientas, orientación práctica y alianzas para prevenir, detectar y responder a la explotación y el abuso sexual infantil en línea…
Por qué importaLas plataformas que usan IA generativa están bajo presión para prevenir el uso de sus sistemas en la creación o difusión de material de abuso…
Meta amplía su IA para detectar anuncios que distribuyen material de abuso infantil
Meta presentó una herramienta de IA que detecta patrones de comportamiento en su plataforma publicitaria asociados a campañas que distribuyen material de abuso…
Por qué importaPlantea un modelo de detección contextual que podría extenderse a otros tipos de contenido ilícito en plataformas publicitarias, pero depende de…
Tu opinión
Te hemos enviado un correo para confirmar tu dirección. El comentario se procesará cuando pulses el enlace.
Gracias. Tu comentario se publicará cuando lo revise el equipo (los primeros comentarios de cada persona se moderan).
Comentario publicado. Gracias por participar.
No se puede comentar aquí.
Indica un nombre (de 2 a 60 caracteres).
El correo no parece válido.
El comentario debe tener entre 10 y 2.000 caracteres.
Demasiados enlaces en el comentario.
No se ha podido comprobar que no eres un robot. Vuelve a intentarlo.
Has alcanzado el límite diario de comentarios.
Demasiados comentarios seguidos. Espera un rato.
No se ha podido enviar el correo de confirmación. Inténtalo de nuevo en unos minutos.



