ИИ изменил 0,016% другого ИИ. Его результат в математике вырос в 6 раз (программирование в простр...
Neural Pathways Academy
0:00 / 0:00
ИИ изменил 0,016% другого ИИ. Его результат в математике вырос в 6 раз (программирование в простр...
203 просмотра · 1 дн. назад
Neural Pathways Academy
75 подписчиков
203 просмотра · 1 дн. назад
Может ли один ИИ, взглянув на исходные веса другого ИИ (17 253 немаркированных числа), определить, чему тот был обучен? На этой неделе исследователи из MIT продемонстрировали, что GPT-6 Astra делает именно это, а затем редактирует веса вручную.
Мы воссоздаем картину с нуля: что представляют собой веса нейронных сетей, почему их чтение считалось безнадежным и как передовая модель читала, исправляла и даже записывала сети напрямую. Она улучшила результат Qwen3.5-0.8B с 7,9% до 48,1% на MATH-500, отредактировав всего 0,016% весов. Мы также рассматриваем, где произошел сбой, и почему это так же важно.
⏱ Разделы
0:00 Неразрешимый вопрос
1:03 Что такое веса
1:58 Как обучение их устанавливает
2:35 Наличие карты
3:09 Программирование в пространстве весов
3:49 Шаг 1: Чтение
6:24 Шаг 2: Редактирование
7:32 Исправление Qwen
9:03 Написание с нуля
10:09 Где это не сработало
11:30 Почему это важно
12:24 Третий автор
📚 Источники и изображения
Такехи, Тео, Чжан, Хаттаб, «Искры программирования в пространстве весов: LLM могут изначально читать и записывать веса нейронных сетей», блог MIT CSAIL, 2 ноября 2026 г.: https://rikiyat.github.io/blog/weight... (скриншот страницы, показан для комментариев)
Модель карты Qwen3.5-0.8B: https://huggingface.co/Qwen/Qwen3.5-0.8B (скриншот страницы, показан для комментариев)
Музыка: "Gentle Discovery", создана для этого канала совместно с Suno.
Результаты предварительные, взяты из поста в блоге, а не из рецензируемой статьи. Все диаграммы — оригинальные анимации Manim.
Новые визуальные объяснения на Neural Pathways Academy. Подпишитесь, чтобы не пропустить следующее видео.
#AI #MachineLearning #Interpretability #weightspaceprogramming