Organizaciones piden a Apple y Google retirar Grok de sus tiendas por generar imágenes explícitas

Hecho Qué ha ocurrido
Una coalición de 28 organizaciones de derechos digitales, liderada por UltraViolet, envió cartas a Tim Cook (Apple) y Sundar Pichai (Google) exigiendo que retiren la aplicación X y su chatbot Grok de las tiendas de apps. Las organizaciones acusan a ambas empresas de beneficiarse de la distribución de imágenes íntimas no consentidas (NCII) y material de abuso sexual infantil (CSAM) generadas mediante Grok. Paralelamente, Ofcom, el regulador británico, anunció que continuará su investigación formal sobre X bajo la Ley de Seguridad Online del Reino Unido, después de que se documentase que Grok podía ser utilizado para generar ediciones sexuales de fotografías de personas reales.
Resumen generado mediante IA a partir de The Register AI (original en inglés). Naturaleza de la información: hecho documentado.
Análisis Por qué importa
Este caso expone la tensión entre plataformas tecnológicas, desarrolladores de IA y reguladores en torno a la seguridad del contenido generado por modelos de IA. Las demandas de retiro plantean precedentes sobre la responsabilidad de Apple y Google en la distribución de herramientas que pueden facilitar delitos, afectando la política de app stores y la estrategia de moderación de contenido en empresas tecnológicas.
- Quién se ve afectado
- Plataformas tecnológicas (Apple, Google), desarrolladores de IA (xAI/Elon Musk), reguladores como Ofcom, y organismos de seguridad infantil y derechos digitales.
- Qué puede cambiar
- Si Apple o Google acceden a las demandas, podría establecerse un precedente de retiro de aplicaciones basadas en cómo se abusan de capacidades de IA generativa dentro de ellas, más allá de cambios técnicos. También podría acelerar directrices de app store específicas sobre herramientas de generación de imágenes y IA.
Análisis generado a partir de la información disponible; no procede de la fuente.
Predicción Qué observar a continuación
Decisiones de Apple y Google en los próximos 30-60 días; evolución de la investigación de Ofcom; nuevas restricciones técnicas de X sobre Grok; posibles acciones normativas de otros reguladores (UE, Francia); cambios en políticas de app store de ambas plataformas respecto a IA generativa.
Recomendación Qué debería hacer una empresa
Empresas de IA con herramientas de generación de contenido deben revisar en los próximos 3-6 meses sus sistemas de moderación y términos de servicio para prevenir generación de CSAM y NCII, y evaluar si sus canales de distribución (app stores, web) requieren controles adicionales segregados por edad o verificación de usuario.
Recomendación generada por IA con la evidencia disponible; no es asesoramiento profesional.
Enviar esta noticia por correo
Fuente original: The Register AI. La referencia es siempre el artículo original.
Ver fuente original ↗generación de imágeneschatbotsmoderación de contenido AppleGoogleXxAIUltraViolet app storesGrokmoderación de contenidoregulaciónseguridad de IA
Forma parte de la historia X y Grok bajo investigación por deepfakes sexuales no consentidos (15 noticias, estado: cerrada).
Tu opinión
0 comentarios
Relacionadas
Autoridad irlandesa abre investigación a X por deepfakes sexualizados generados con IA
La Comisión de Protección de Datos de Irlanda (DPC) ha iniciado una investigación exhaustiva sobre la plataforma X de Elon Musk, centrada en imágenes…
Por qué importaLa investigación sienta precedente sobre responsabilidad de plataformas al integrar herramientas generativas sin salvaguardas suficientes. Para…
España activa vía penal contra plataformas por pornografía infantil generada con IA
El Gobierno español ha invocado el artículo 8 del Estatuto Orgánico del Ministerio Fiscal ante el Consejo de Ministros para solicitar formalmente que la…
Por qué importaEste movimiento convierte una preocupación regulatoria en una posible vía de responsabilidad penal concreta contra plataformas, alineándose con…
Estudio: herramientas IA como Grok y Gemini generan imágenes falsas de políticos en segundos
NewsGuard, observatorio estadounidense contra la desinformación, prueba que Grok Imagine (xAI) y Gemini (Google) son capaces de crear imágenes falsas…
Por qué importaDemuestra que los guardrails de seguridad en herramientas generativas comerciales son inconsistentes y vulnerables a explotación para crear…
Grok sigue generando imágenes sexualizadas pese a restricciones de X
The Verge ha documentado que Grok, la IA de xAI integrada en X, continúa generando imágenes sexualizadas no consentidas, incluyendo desnudos de hombres y…
Por qué importaEste hallazgo demuestra que las salvaguardas contra la generación de deepfakes íntimos siguen siendo insuficientes en plataformas de masas, lo que…

