Attention is all you need || Разбор трансформеров || Краткое объяснение

В статье «Внимание — это всё, что вам нужно» доминировала область обработки естественного языка и генерации текста. Будь то GPT3, BERT или Blenderbot, передовые модели или системы обработки естественного языка, окружающие нас, используют трансформеры. Здесь я как можно быстрее объяснил основу трансформеров (голову внимания). Надеюсь, вам понравится. Ваши отзывы очень важны для меня. Поэтому, пожалуйста, оставьте свой. И как всегда, спасибо за просмотр. По вопросам или обновлениям следите за обновлениями в Instagram: Instagram:   / developershutt   Временные метки: 0:00 Введение 0:43 Ограничения RNN 2:07 Введение в самовнимание 3:30 Позиционное кодирование 5:15 Многоголовое внимание 7:23 Декодер 9:46 Маскированное многоголовое внимание 10:49 Что нужно помнить