ЧАСТЫЕ ОШИБКИ В PYTORCH — Как сэкономить время 🕒
Aladdin Persson
0:00 / 0:00
ЧАСТЫЕ ОШИБКИ В PYTORCH — Как сэкономить время 🕒
61 253 просмотра · 6 л. назад
Aladdin Persson
92,9 тыс. подписчиков
61 253 просмотра · 6 л. назад
В этом видео я покажу вам 10 распространенных ошибок в PyTorch, и, избегая их, вы сэкономите много времени на отладке моделей. Это было вдохновлено твитом Андрея Карпати, поэтому я и написал, что он это одобрил :)
Твит Андрея Карпати:
/ 1013244313327681536
❤️ Поддержите канал ❤️
/ @aladdinpersson
Платные курсы, которые я рекомендую для обучения (партнерские ссылки, без дополнительных затрат для вас):
⭐ Специализация по машинному обучению https://bit.ly/3hjTBBt
⭐ Специализация по глубокому обучению https://bit.ly/3YcUkoI
📘 Специализация по MLOps http://bit.ly/3wibaWy
📘 Специализация по GAN https://bit.ly/3FmnZDl
📘 Специализация по NLP http://bit.ly/3GXoQuP
✨ Отличные бесплатные ресурсы:
NLP: https://web.stanford.edu/class/cs224n/
CV: http://cs231n.stanford.edu/
Развертывание: https://fullstackdeeplearning.com/
FastAI: https://www.fast.ai/
💻 Моя система глубокого обучения и записи:
https://www.amazon.com/shop/aladdinpe...
Репозиторий GitHub:
https://github.com/aladdinpersson/Mac...
✅ Разовые пожертвования:
PayPal: https://bit.ly/3buoRYH
▶️ Вы можете связаться со мной в:
Twitter - / aladdinpersson
LinkedIn - / aladdin-persson-a95384153
Github - https://github.com/aladdinpersson
ПЛАН:
0:00 - Введение
0:21 - 1. Не переобучение пакета данных
2:45 - 2. Забыл переключить режим обучения/оценки
4:47 - 3. Забыл .zero_grad()
6:15 - 4. Softmax при использовании CrossEntropy
8:09 - 5. Член смещения с BatchNorm
9:54 - 6. Использование представления в качестве перестановки
12:10 - 7. Неправильная аугментация данных
14:19 - 8. Не перемешивание данных
15:28 - 9. Не нормализация данных
17:28 - 10. Не обрезка градиентов
18:40 - Что я пропустил?