엔지니어스 - Engineeus

flickr scraper (Bing Image Crawling) 설치 본문

Autonomous Tech./Installation

flickr scraper (Bing Image Crawling) 설치

Engineeus 2020. 9. 9. 16:16
728x90

Flickr Scraper는 Google Images Download의 대용으로 쓸 수 있다.

 

'Unfortunately all 10 could not be downloaded because some images were not downloadable. 0 is all we got for this search filter!'

google-images-download에서 위와 같은 에러가 생겨 다른 방법을 찾다가 발견 한 것이다.

 

설치법

1. chrome 설치

이건 알아서 설치 부탁드립니다.

 

2. chrome driver 설치

chromedriver.chromium.org/downloads

 

Downloads - ChromeDriver - WebDriver for Chrome

WebDriver for Chrome

chromedriver.chromium.org

2-1. 버전에 맞는거 클릭 후 linux용 zip 다운로드.

(크롬 버전 확인은 검색창 여신 후 'chrome://version/'를 치시면 됩니다.)

2-2. 임의의 폴더로 가서 압축을 풀면 chromedriver.exe가 생성 됨.

 

3. flickr scraper 설치

3-1. 임의의 폴더로 간 후에 git clone을 한다.

git clone github.com/ultralytics/google-images-download.git

 

3-2. clone으로 내려받은 폴더로 간 후에 이전에 받은 chromedriver를 옮긴다.

cd googlegoogle-images-download

 

3-3. 필요 라이브러리 설치 

pip install -U -r requirements.txt

 

3-4. 실행 명령어

python3 bing_scraper.py --search "honeybees on flowers" --limit 10 --download --chromedriver "./chromedriver"

(위 빨간색 두 변수만 조절 해 준다. 처음엔 검색명, 두번째는 갯수)

 

※갯수를 알기 위해선 아래 프로그램을 chrome에 확장프로그램으로 설치 하여 알 수 있다.

Imageye - Image downloader

 

Comments