크롤링 Selenium Chrome 에러

에러 메세지

unknown error: session deleted because of page crash
from tab crashed

 

원인

공유메모리 공간부족(/dev/shm)

AWS EC2 를 t2.nano 로 바꿨더니, 메모리 512MB 는 아무래도 작았나보다.

 

조치

t2.micro 로 다시 바꾸려다가 메모리 점유율을 살펴보니

더이상 사용하지 않고 있는 mariadb 프로세스가 메모리를 점유하고 있는 것을 발견하고

mariadb 서비스를 중지 후, 크롤링을 재실행, 정상 수행 완료 되었다.