Engineering/에러 해결 모음
[에러] OSError: Can't load config for 'klue/bert-base'
Hyen4110
2023. 5. 12. 11:18
OSError: Can't load config for 'klue/bert-base'. Make sure that:
- 'klue/bert-base' is a correct model identifier listed on 'https://huggingface.co/models'
- or 'klue/bert-base' is the correct path to a directory containing a config.json file
아래 늘 실행하던 간단한 코드를 실행하는데, 에러가 발생했다.
from transformers import AutoTokenizer
tokenizer = AutoTokenizer.from_pretrained("klue/bert-base")
혹시, transformers가 version이 old해서 발생하는 문제 인것 같아서,
transformers 2.9를 4.27로 바꾸니 해결됨
(transformers 3.5도 가능)
pip install transformers==4.27
동일한 이슈가 있는 stackoverflow에서는
disk 용량 문제일 수있다고도 하고, bin파일을 직접 받아서 실행해서 해결하기도 한 듯
https://github.com/huggingface/transformers/issues/353