google images download 100장 이상 사용하기

googlesimagedownload로 크롤링을 할 수 있는데 딱 100장까지만 된다.

100장을 넘어가는 순간 에러가 뜨게 된다. 

그래서 캠퍼 중 짱짱 쩌는 서일님이랑 희석님이 chrome driver를 이용해서 100장 이상 쓰는 법을 알려주셨다.

슬랙에 올려두셨는데, 자꾸 슬랙에 들어가서 찾고 확인하기 너무 귀찮아서 블로그 메모장에 끼적어놔야겠다.

 

# googleimagesdownload 하기
!pip install --upgrade git+https://github.com/Joeclinton1/google-images-download.git

#chrome driver 다운 받기
!sudo apt-get install chromium-chromedriver

#image download
!googleimagesdownload --keywords "캡틴,아이언맨" --limit 400 --format png --output_directory data -cd /usr/lib/chromium-browser/chromedriver

#압축하기
!tar -cvf data.tar data

#드라이브에 업로드하기
from google.colab import drive
drive.mount('/content/drive')