트랜스포머 모델
토크나이저는 텍스트를 토큰 ID로 바꾸고 트랜스포머는 그 표현을 처리합니다. 모델 설정을 바꾸기 전에 입력과 출력의 형태를 확인합니다.
데이터셋과 토크나이저
실험 전에 학습, 검증, 테스트 데이터를 나눕니다. 모델에 맞는 토크나이저를 사용하고 패딩, 잘라내기, 라벨을 확인합니다.
모델 평가
작업에 맞는 지표를 선택하고 개별 오류를 살펴봅니다. 테스트 데이터를 프롬프트나 학습 조정에 사용하지 않아 성능 과대평가를 피합니다.
실습 과제
작은 텍스트 분류 예제를 실행해 예측 다섯 개를 저장하고 입력을 바탕으로 오류 두 개를 설명합니다.
완료 체크리스트
- 세 가지 주제를 자신의 말로 설명합니다.
- 과제를 완료하고 결과물이나 설계 노트를 저장합니다.
- 경계 사례를 테스트하고 한 가지 한계를 기록합니다.