본문 바로가기
Engineering/에러 해결 모음

[에러] OSError: Can't load config for 'klue/bert-base'

by Hyen4110 2023. 5. 12.
반응형

OSError: Can't load config for 'klue/bert-base'. Make sure that:
- 'klue/bert-base' is a correct model identifier listed on 'https://huggingface.co/models'
- or 'klue/bert-base' is the correct path to a directory containing a config.json file

아래 늘 실행하던 간단한 코드를 실행하는데, 에러가 발생했다.

from transformers import AutoTokenizer

tokenizer = AutoTokenizer.from_pretrained("klue/bert-base")

혹시, transformers가 version이 old해서 발생하는 문제 인것 같아서,
transformers 2.9를 4.27로 바꾸니 해결됨

(transformers 3.5도 가능)

pip install transformers==4.27

동일한 이슈가 있는 stackoverflow에서는
disk 용량 문제일 수있다고도 하고, bin파일을 직접 받아서 실행해서 해결하기도 한 듯

https://github.com/huggingface/transformers/issues/353

반응형

댓글