El Fiscal General de California, Rob Bonta, emitió el viernes una carta de cese y desistimiento a xAI, exigiendo que la empresa detenga inmediatamente la creación y distribución de imágenes íntimas deepfake no consentidas y material de abuso sexual infantil (CSAM). La acción sigue a un anuncio anterior de esta semana de que la oficina del Fiscal General de California estaba investigando a xAI, la startup de inteligencia artificial de Elon Musk, por informes de que su chatbot, Grok, estaba siendo utilizado para generar imágenes sexuales no consentidas de mujeres y menores.
Bonta declaró en un comunicado de prensa: "Hoy, envié a xAI una carta de cese y desistimiento, exigiendo que la empresa detenga inmediatamente la creación y distribución de imágenes íntimas deepfake no consentidas y material de abuso sexual infantil. La creación de este material es ilegal. Espero que xAI cumpla de inmediato. California tiene tolerancia cero con el CSAM".
La oficina del Fiscal General también afirmó que xAI parecía estar facilitando la producción a gran escala de desnudos no consentidos, que supuestamente se están utilizando para acosar a mujeres y niñas en línea. La agencia ha dado a xAI cinco días para demostrar las medidas que está tomando para abordar estos problemas.
En el centro de la controversia se encuentra la función de "modo picante" de Grok. Esta función, diseñada para permitir respuestas más desinhibidas y potencialmente controvertidas de la IA, aparentemente ha abierto la puerta para que los usuarios generen contenido sexualmente explícito. Los deepfakes, en este contexto, se refieren a imágenes o videos generados por IA que representan de manera convincente a personas haciendo o diciendo cosas que nunca hicieron en realidad. La tecnología plantea importantes preocupaciones éticas y legales, particularmente cuando se utiliza para crear pornografía no consentida o para explotar a niños.
El uso de la IA para generar deepfakes se ha vuelto cada vez más sofisticado, lo que dificulta distinguir entre contenido real y fabricado. Esto plantea un desafío importante para las fuerzas del orden y los esfuerzos de moderación de contenido. Los expertos en ética de la IA han advertido durante mucho tiempo sobre el potencial de uso indebido de estas tecnologías, particularmente en la creación de contenido dañino e ilegal.
xAI aún no ha emitido una declaración pública en respuesta a la carta de cese y desistimiento. La empresa ahora enfrenta el desafío de demostrar a la oficina del Fiscal General de California que está tomando las medidas adecuadas para evitar el uso indebido de su tecnología y para proteger a las personas de la creación y distribución de imágenes íntimas no consentidas. El resultado de esta investigación podría tener implicaciones significativas para la regulación y el desarrollo de las tecnologías de IA, particularmente aquellas con el potencial de generar contenido realista y potencialmente dañino.
Discussion
Join the conversation
Be the first to comment