Engineering/에러 해결 모음

[에러] ModuleNotFoundError: No module named 'transformers.tokenization_bert'

Hyen4110 2023. 5. 12. 11:23

ModuleNotFoundError: No module named 'transformers.tokenization_bert'

from transformers.tokenization_bert import BasicTokenizer
ModuleNotFoundError: No module named 'transformers.tokenization_bert'

transformers version을 2.9에서 4.27로 upgrade하니 위와 같은 에러 발생.

구글링하니, 4.0 이상의 버전에서 발생한다고 하여 3.5로 install 후 해결

pip install transformers==3.5

https://stackoverflow.com/questions/74005930/loss-does-not-decrease-and-accuracy-does-not-improved-while-using-hugggingface-t