Python 65_ 웹 크롤링- icrawler를 이용해 이미지 크롤링하기

"""

icrawler 패키지를 이용해서, Google 이미지 검색 결과의 이미지들을 다운로드

> pip install icrawler

"""

from icrawler.builtin import GoogleImageCrawler

import os

# 이미지 저장 폴더 경로

save_dir = os.path.join('..', '..', 'images')

# GoogleImageCrawler 객체 생성

google_crawler = GoogleImageCrawler(storage={'root_dir': save_dir})

google_crawler.crawl(keyword='펭수', max_num=50)

결과

>> 위의 결과는 images.google.com에서 '펭수' 검색 결과를 가져온 것이다.

그 밖에 여러 검색 조건을 파라미터를 통하여 설정할 수 있다.

    

# 검색 필터링(filter) 조건들

filters = {

    'size': 'large',

    'license': 'noncommercial,modify', # 비상업용도, 수정 가능

    'color': 'blackandwhite'

    }

# GoogleImageCrawler 객체 생성

google_crawler = GoogleImageCrawler(storage={'root_dir': save_dir})

google_crawler.crawl(keyword='cat', max_num=50, filters=filters)

추천 웹크롤링 패키지

+ Scrapy