트랜스포머 모델로 GPT만들기
이 강의는 트랜스포머 모델과 GPT(Generative Pre-trained Transformer)에 대한 이해와 구현 방법을 학습하는 과정입니다. 머신러닝 기반이 약한 분들도 쉽게 따라올 수 있도록 구성되어 있으며, 파이썬 코드 수준에서의 적용 방법을 배우게 됩니다.
22명의 학생들이 수강
22
이 강의는 트랜스포머 모델과 GPT(Generative Pre-trained Transformer)에 대한 이해와 구현 방법을 학습하는 과정입니다. 머신러닝 기반이 약한 분들도 쉽게 따라올 수 있도록 구성되어 있으며, 파이썬 코드 수준에서의 적용 방법을 배우게 됩니다.
Course Currilcum
-
- 트랜스포머 논문보고 GPT 만들기 1 입력, 토큰화, positional 임베딩 처리 00:18:00
- 트랜스포머 논문보고 GPT 만들기 2 실습 참고 GPT 코드 실행해 보기 00:12:00
-
- 트랜스포머 논문보고 GPT 만들기 3 잔차 처리, 정규화, 어탠션처리,Feed Forwad,아웃풋 임베딩(linear)과 소프트맥스 00:15:00
- 트랜스포머 논문보고 GPT 만들기 4 GPT-2 모델의 문장 생성 기능(generate) 구현 00:31:00
- 트랜스포머 논문보고 GPT 만들기 5 Transformer Block의 구성 요소와 동작 원리 00:12:00
- 트랜스포머 논문보고 GPT 만들기 6 내적연산과 다중 헤드 어텐션 (MHA) 00:29:00
- 트랜스포머 논문보고 GPT 만들기 7 Scaled Dot-Product Attention 과 마무리 00:10:00
- 라마(LLaMA)를 사용한 텍스트 생성 1 : 토큰화 및 모델 설정 00:41:00
- 라마(LLaMA)를 사용한 텍스트 생성 2 : generation.py 파일 분석 완료 하기 00:55:00
- 라마(LLaMA)를 사용한 텍스트 생성 3 : MODEL 00:21:00
- 비쿠나(Vicuna AI)설치와 Vicuna 13B 모델 Cli 실행 00:17:00
- 파인튜닝(Fine-Tuning) – GPT 3.5-Turbo + 랭체인(Langchain) 00:15:00
- 증강검색 기능 만들기 – 임베딩(Embedding) -Vector Search(벡터 검색) + 랭체인(Langchain) 00:20:00
PRIVATE COURSE
- PRIVATE
- EXPIRED
- 위시리스트
샵투스쿨의 목표
교육은 백년지대계 !
개인과 국가 발전의 초석은 교육과 배움입니다.새로운 지식과 기술 재교육의 갈망을 샵투스쿨에서 채우세요.

