[python] Segmentation fault (core dumped)

#python #pytorch #transformers Segmentation fault (core dumped)와 같은 에러는 C에서 주로 포인터를 사용할때, 허용되지 않은 메모리 부분에 접근하려할 때나, 허용되지 않은 방법으로 메모리를 접근하려할 때 발생하는 에러이다. 나는 python환경에서 transformers를 사용할 때, 모델을 불러오는 과정에서 에러가 발생했고, Segmentation fault (core dumped)뿐만 아니라, Illegal instruction (core dumped)도 번갈아서 발생했다.

이를 해결하기 위해서 구글링을 해보니, sentence piece의 버전을 0.1.91로 낮추면 에러가 잡힌다는 말을 보게 되었다. 놀랍게도, 성공적으로 돌아간다. pip install sentencepiece==0.1.91...