참고자료 1

카드와 경로를 만들 때 토대가 되는 책, 논문, 강의, 문서, 구현체를 모아둡니다.

플레이북 advanced

The Ultra-Scale Playbook

대규모 LLM 학습을 위한 병렬화, 메모리, 통신, 성능 최적화 전략을 다루는 실전형 playbook.

distributed-trainingparallelismperformancememory