반응형
250x250
Notice
Recent Posts
Recent Comments
Link
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | ||||||
| 2 | 3 | 4 | 5 | 6 | 7 | 8 |
| 9 | 10 | 11 | 12 | 13 | 14 | 15 |
| 16 | 17 | 18 | 19 | 20 | 21 | 22 |
| 23 | 24 | 25 | 26 | 27 | 28 | 29 |
| 30 | 31 |
Tags
- 시각화
- nlp
- product
- 언어지능딥러닝
- Computer Vision
- fit
- tableau
- DACON
- 데이터시각화
- 인공지능
- 모델링
- 딥러닝
- OKR
- 데이터분석
- productmarketfit
- omtm
- 자연어처리
- 그로스해킹
- Market
- 파인튜닝
- 데이터모델링
- 컴퓨터비전
- pmf
- 데이콘
- 머신러닝
- dl
- ERD
- 태블로
Archives
- Today
- Total
블로그
[학습] PyTorch 토크나이저 저장 본문
반응형
모델과 토크나이저를 저장할 때는 이 둘을 같은 디렉터리에 저장하는 것이 관리하기 편리하며, 나중에 둘을 함께 로드할 때도 편리하기 때문에 같은 파일에 저장하는 것을 습관화 하는게 좋을 것 같다.
⬇️저장 방법
# 토크나이저 및 모델 저장
tokenizer.save_pretrained(save_directory)
model.save_pretrained(save_directory)728x90
반응형
'공부' 카테고리의 다른 글
| [학습] Pandas stack, unstack 메소드 (0) | 2023.10.31 |
|---|---|
| [학습] 분류 모델 불균형 데이터 평가지표 (0) | 2023.10.03 |
| [학습] 불균형한 데이터 학습 시 클래스 비율 지정 (0) | 2023.09.21 |
| [학습] Pandas apply 메소드 (5) | 2023.09.11 |
| [논문 리뷰] Application of Machine Learning for Assessment of HS Code Correctness (0) | 2023.09.08 |