Перейти к содержимому

¿Qué puede hacer una IA local? Pruebas reales en una NVIDIA 5090M

Jonatan Castro

0:00 / 0:00

¿Qué puede hacer una IA local? Pruebas reales en una NVIDIA 5090M

27 913 просмотров · 1 мес. назад
Jonatan Castro
106 тыс. подписчиков
27 913 просмотров · 1 мес. назад
🛒 Olares ONE: https://one.olares.com/products/olare... 🌐 Blog: https://www.jonatancastro.com/ 💬 Telegram: https://t.me/jonatancastroyt 🧵 Foro: http://foro.jonatancastro.com/ Llevo semanas poniendo a trabajar la IA local en el Olares ONE: controlando luces en Home Assistant, trabajando con archivos, configurando servicios y resolviendo tareas largas. He probado más de 30 modelos y variantes para averiguar cuáles hacen bien el trabajo, cuánto tardan y dónde fallan. Explico cómo funcionan los LLM, los tokens, los parámetros, la cuantización y el contexto, además de las diferencias entre cargar un modelo, procesar el prompt y generar la respuesta. Después pasamos a las pruebas con llama.cpp y OpenClaw, la comparación de modelos y una demostración desde Telegram. Olares me envió el equipo para esta review. No me pagan por el vídeo; la marca ha revisado los datos técnicos del guion, pero las opiniones y conclusiones son mías. Olares OS tendrá su propio vídeo más adelante. 📺 Vídeos relacionados: ¿Qué puede hacer una IA local? Pruebas reales:    • ¿Qué puede hacer una IA local? Pruebas reales   Openclaw controla mi Home Assistant:    • Openclaw controla mi Home Assistant   NVIDIA RTX 5090 y 96GB de RAM en un “mini” PC Olares ONE, ArkKVM, NAS Terramaster F4-425 Pro:    • NVIDIA RTX 5090 y 96GB de RAM en un “mini”...   ⏱️ Capítulos: 00:00 Más de 30 modelos de IA local a prueba 00:30 Transparencia y Olares ONE frente a Olares OS 00:57 Cómo funcionan los LLM: tokens y parámetros 02:11 Más parámetros no siempre significa mejor 02:40 Cuantización y contexto 03:30 Carga, prefill y generación de tokens 04:24 Hardware del Olares ONE y RTX 5090 Laptop 05:40 Qué modelos caben en 24 GB de VRAM 06:15 IA local frente a IA en la nube 06:57 Suscripciones y precio equivalente de API 07:45 Cómo elegir un modelo para cada tarea 08:03 Metodología: seis suites y 33 comprobaciones 08:29 Resultados: Ornith, Qwopus y Qwen 09:20 Pruebas de tareas y tiempos de ejecución 10:26 Por qué hice las pruebas sin MCP 11:01 OpenClaw desde Telegram y tiempos de respuesta 11:31 Conclusiones: utilidad y limitaciones 12:25 Para quién tiene sentido y próximo vídeo de Olares OS Mi equipo de grabación Cámara: Sony ZV-E1 Lente: Sigma 16mm F1.4 E-Mount https://amzn.to/3SGFQvb Micrófono: Comica VM40 https://amzn.to/4hZi9tX Disclaimer: siempre que sea posible, los enlaces serán afiliados; ayudan al canal y a ti no te costará nada. #IALocal #OlaresONE #OpenClaw #NVIDIA #HomeAssistant