Trendar
← GitHub 목록
GitHubML 방법론프레임워크중요도 8Jupyter Notebook

신경망 기초부터 트랜스포머까지 배우는 실습형 강의

karpathy/nn-zero-to-hero

23K포크 3.3K오늘 +18월간 +1.3K
AI 분석

한줄 요약

카파시의 'Neural Networks: Zero to Hero'는 신경망의 기초부터 트랜스포머까지 단계적으로 학습하는 실습형 강의로, 유튜브 영상과 주피터 노트북으로 구성되어 있습니다.

핵심 기능

단계별 학습: micrograd(자동미분 구현)부터 makemore(언어모델)까지 기초부터 심화까지 순차적으로 진행
실습 중심: 각 강의마다 주피터 노트북을 제공하여 직접 코드를 작성하고 훈련할 수 있음
백프로프 이해: Lecture 5에서는 PyTorch autograd 없이 수동으로 역전파를 구현하여 깊은 이해를 도움
최신 기법 포함: Batch Normalization, Adam optimizer, Residual connections 등 현대 딥러닝 기법을 다룸

언제 쓰나

신경망의 기초(역전파, MLP)를 체계적으로 학습하고자 하는 초보자
언어모델의 작동 원리를 코드 레벨에서 이해하려는 연구자
PyTorch를 활용한 딥러닝 실무 역량을 키우고자 하는 개발자
강의 자료로 활용하거나, 개인 학습용으로 사용하기 적합