Attention/Transformer 시각화로 설명
임커밋
0:00 / 0:00
Attention/Transformer 시각화로 설명
90 419 просмотров · 2 г. назад
임커밋
49,5 тыс. подписчиков
90 419 просмотров · 2 г. назад
[Powered by Vrew]
이 영상의 자막은 Vrew를 통해 생성/편집되었습니다.
이 영상은 Attention과 Transformer 시리즈 영상을 종합한 영상입니다.
영상에는 3Blue1Brown의 open source 라이브러리 manim을 사용하였습니다.
본 영상 소스를 만든 코드는 https://github.com/CodingVillainKor/m... 에서 확인할 수 있습니다.
00:00 1 Attention의 원리
12:00 2 Positional Encoding과 Self-attention
18:36 3 Transformer의 학습방식, Masking
#어텐션 #트랜스포머 #딥러닝