프로그램 소개

대규모 언어 모델(LLM)이 어떻게 동작하는지 원리부터 이해하고, 작은 언어 모델을 처음부터 직접 구현해 보는 심화 워크숍입니다. 토크나이저, 어텐션, 학습 루프, 추론까지 전체 파이프라인을 손으로 만들어 봅니다.

커리큘럼 (6주)

1주차 — 토크나이저와 임베딩의 이해

2주차 — 셀프 어텐션과 트랜스포머 블록 구현

3주차 — 학습 루프와 손실 함수, 옵티마이저

4주차 — 소형 모델 사전학습(pre-training) 실습

5주차 — 파인튜닝과 프롬프트 설계

6주차 — 추론 최적화와 개인 프로젝트 발표

일정 및 장소

매주 목요일 저녁 7시 ~ 9시 30분 (총 6회, 15시간)

하우스 영원 (서울시 마포구 토정로 35, 4층)

정원 10명

대상 및 준비물

파이썬 기초 문법을 알고 있는 분께 권장합니다.

개인 노트북 지참 (실습 환경 설정 안내 제공)

수강료에 6주 전 회차 수업과 실습 코드/자료가 포함됩니다.

환불 및 취소 규정

프로그램 시작 7일 전까지: 100% 환불

프로그램 시작 3일 전까지: 50% 환불

프로그램 시작 2일 전 ~ 당일: 환불 불가

결제 후 7일 이내, 강의가 시작되지 않았다면 전액 환불해 드립니다.

문의

하우스 영원 · 서울시 마포구 토정로 35, 4층

이메일 hi@01.works · 인스타그램 @01.haus