Error log

[Gangsss]

Baseline 혹은 task 수행하면서 생겼던 Error를 기록합니다.

[Gangsss]

Error log Template

1. Error code

2. 어떤 코드에서 Error가 났는지

3. 원인

4. 해결

[KyungHyunLim]

1. Error code

• RuntimeError: CUDA error: CUBLAS_STATUS_ALLOC_FAILED when calling cublasCreate(handle)

2. 어떤 코드에서 Error가 났는지

• inference.py
  • trainer.train()이 실행된 직후, 첫번째 loss 계산시 (모델 설정이 안맞아서 발생하는 오류)

3. 원인

• tokenizer 설정이 default로 None이 되어있는데, 제대로 pretrained 모델이 로딩이 안되는것 같음

4. 해결

• 모델, 토크나이저, 컨피그 3개 모두, pre-trained 모델을 명시해주니까 해결되었음

[Gangsss]

@KyungHyunLim 경현님 추가 감사합니다. 코드라인도 추가해주시면 좋을 거 같습니다!

[Kimdongui]

감사합니다 경현님.. 이거였군요..

[lswkim]

1. Error code

state = {k: state[k] for k in dataset.dict.keys()} # in case we add new fields
KeyError: ‘_data’

2. 어떤 코드에서 Error가 났는지
   새로 추가된 datasets 불러올 때 에러 발생
   load_from_disk('../addtional_dataset/dataset_wiki_qg/')

3. 원인
   datasets 라이브러리 버전 문제

4. 해결
   버전 1.6으로 수정 후 정상 로드
   pip install datasets==1.6