Перейти к содержимому

Tu IA Local No Es Tan Privada Como Crees

Jorge Marfil

0:00 / 0:00

Tu IA Local No Es Tan Privada Como Crees

14 539 просмотров · 1 дн. назад
Jorge Marfil
25,8 тыс. подписчиков
14 539 просмотров · 1 дн. назад
Tu IA local no es tan privada como crees: una empresa de seguridad envenenó un modelo para un agente por menos de 50 $ y unas 2 horas y media de entrenamiento, y ningún escáner de ficheros lo detecta. En este vídeo recorro las cinco capas de un montaje local con Ollama, desde el fichero GGUF hasta las herramientas que le das al modelo, con las cifras de cada caso y lo que yo cambié en mi propio sobremesa. Curso de IA Local completo: apúntate a la lista de espera → https://localanalysis.ai/jm/curso Redes Sociales: 📷 Instagram ➞   / jorgemarfil.ia   CAPÍTULOS 00:00 El año en que lo tuve todo montado 02:02 Por qué nos fuimos a local 02:56 Lo que sí es verdad del fichero y del puerto 04:04 Qué cambia después del primer día 04:42 Las cinco capas 06:40 Capa uno: el repositorio que copió a OpenAI 09:03 La web falsa de Ollama 09:41 Capa dos: la plantilla de chat 11:20 Una plantilla con una frase trampa 13:17 Plantillas de desconocidos como costumbre 14:36 Capa tres: el programa que lee el fichero 16:45 El actualizador de Windows y el resto de runners 18:39 Capa cuatro: el día que puse 0.0.0.0 21:14 Lo que el router no para 23:42 Capa cinco: el modelo que obedece a dos palabras 26:35 Por qué fallan las defensas de siempre 28:45 Los modelos sin rechazos 29:49 Lo que de verdad ha pasado hasta hoy 31:11 Cuando el modelo tiene manos 31:50 Las cinco cosas que cambié 34:57 Dónde me quedo ¿Qué es una IA local privada? Una IA local es un modelo de lenguaje que descargas y ejecutas en tu propio ordenador, con un programa como Ollama, LM Studio o llama.cpp, en lugar de usarlo desde la nube de un proveedor. Es privada en un sentido concreto: tus prompts no salen de tu máquina. Pero que tus datos no viajen no significa que tu montaje sea seguro, porque el fichero, la plantilla de chat, el programa que lo ejecuta, el puerto de red y las herramientas del agente pueden abrir otras puertas. Qué cubre este vídeo • Un repositorio falso que copiaba la ficha de un modelo de OpenAI llegó al número uno de tendencias en Hugging Face con unas 244.000 descargas en menos de 18 horas, y su verdadero contenido era un ladrón de información. • La plantilla de chat de un GGUF es código que se ejecuta en cada mensaje: con 18 modelos y unas 72.000 consultas, una frase trampa hizo caer el acierto en preguntas de hechos de un 90 % a un 15 % y colocó enlaces del atacante en más del 90 % de los casos. • Bleeding Llama, un fallo de gravedad 9,1 sobre 10 en versiones de Ollama anteriores a la 0.17.1, permitía leer memoria del proceso, con variables de entorno y claves de API, con solo tres llamadas sin autenticación. • Un escaneo de 293 días encontró 175.108 servidores Ollama abiertos a cualquiera en 130 países, y más del 48 % anunciaban que el modelo puede llamar a herramientas. • Poner OLLAMA_HOST a 0.0.0.0 desactiva la comprobación de la cabecera Host, y con DNS rebinding una sola página web maliciosa puede hablar con tu Ollama desde tu propio navegador. • ProjectDiscovery envenenó un modelo con un 1 % de ejemplos malos en uno pequeño, y con un 20 % (125 filas de 625) en uno realista conectado a Codex CLI: se activó en 50 de 50 pruebas y mandó el fichero .env a un servidor externo. • Anthropic y el AI Security Institute británico mostraron que 250 documentos envenenados, un 0,00016 % de los datos, bastaban para colar una puerta trasera en modelos de entre 600 millones y 13.000 millones de parámetros. • Las cinco medidas que cambié: dejar el servidor en loopback, actualizar el runner, usar pesos de procedencia conocida, sacar los secretos del directorio del agente y separar los procesos que ejecutan comandos de los que tienen red. • Si solo chateas con pesos oficiales, un runner actualizado y el puerto en loopback, tu IA local sigue siendo la opción privada, y el riesgo es bajo. Las cifras que proceden de publicaciones de usuarios en comunidades, como las de Reddit sobre plantillas de chat, son experiencias individuales de personas concretas: ilustran el problema, no son promedios. #IALocal #Ollama #Ciberseguridad #LLM #Privacidad