HuaRenCa
Back to Forum
Community

Un informe reciente de Anthropic expone un impactante caso de estafa romántica con IA, caso n.º GTG-15001

lidong123
lidong123

1 month ago

Un informe reciente de Anthropic expone un impactante caso de estafa romántica con IA, caso n.º GTG-15001 Un estudio de aplicaciones nacional creó 4700 cuentas de novias con IA en dos semanas y, al mismo tiempo, "desplumó" a 25 000 hombres mayores en el extranjero. En el grupo de emparejamiento, el 75 % eran totalmente IA y el 25 % restante eran personas reales trabajando a tiempo parcial. El modelo de reparto de tareas era muy astuto: la IA se encargaba de la conversación diaria y de la relación amorosa; las personas reales a tiempo parcial solo se ocupaban de los puntos en los que la IA podía delatarse, como atender videollamadas para demostrar que la cuenta era de una persona real. Incluso cuando una persona real respondía mensajes, se apoyaba en la IA para generar varias opciones de texto, y la persona elegía una antes de enviarla. El grupo operaba más de 20 aplicaciones de citas y las promocionaba como citas entre personas reales, pero todo el sistema de fondo era esta cadena de producción con IA. Con el modelo Claude, generaron en total alrededor de 2,36 millones de mensajes de chat. Si el usuario quería seguir chateando, tenía que recargar y comprar monedas; en esencia, era una estafa romántica envuelta en una capa de IA. Para eludir la revisión de las plataformas, el equipo también desarrolló un controlador de interfaz específico que solo se activaba durante las revisiones de Apple y Google, y permanecía inactivo el resto del tiempo. Más de 20 aplicaciones usaban nombres de clase diferentes para evitar la detección de similitud de las plataformas. El informe también menciona un punto que merece atención: los fabricantes de IA pueden ver todas las conversaciones entre los usuarios y la IA, determinar por su cuenta si hay infracciones, llevar a cabo investigaciones, cerrar cuentas y publicar informes externos, todo el proceso sin necesidad de tribunales, organismos reguladores ni consentimiento del usuario.

Un informe reciente de Anthropic expone un impactante caso de estafa romántica con IA, caso n.º GTG-15001

3
931

Comments (3)

Your avatar
Sign in to comment
lemonaloe91
lemonaloe911 month ago

Cuando un usuario común se topa con este tipo de apps, ¿qué puede hacer para identificar de antemano a una novia con IA? Por ejemplo, ¿fijándose en detalles como la velocidad de respuesta o la frecuencia de las llamadas de voz?

朱李鑫
朱李鑫1 month ago

El informe dice que los proveedores de IA pueden ver directamente todas las conversaciones entre el usuario y la IA y luego investigar y suspender cuentas por su cuenta. ¿De dónde surge ese límite de permisos? ¿Los usuarios lo aceptan por defecto en algún tipo de cláusula al usarlo? Además, si los trabajadores humanos a tiempo parcial solo se encargan de las videollamadas, ¿hay una descripción más concreta del flujo de reparto de tareas entre ellos y la IA, por ejemplo, la frecuencia con la que aceptan encargos o el reparto de ingresos?

dearxks888
dearxks8881 month ago

Es muy difícil erradicar por completo el conflicto entre la moderación de la plataforma y los controles de la interfaz de usuario, porque el costo es demasiado bajo y el beneficio, alto.