Scrapy

8개 레벨

Scrapy is an open-source web crawling framework for Python, designed to extract data from websites. It provides tools for automation, handling requests, managing data pipelines, and supports various data formats. Ideal for developers and data scientists for web scraping tasks.

공식 웹사이트

Scrapy 스킬 여정을 시작하세요

8개의 레벨을 통해 체계적으로 학습하고, 커리어 성장의 기반을 다지세요.

8 레벨 로드맵

단계별 역량 인증

학습 로드맵

8개 레벨

전체 8

Lv 1. 기본적인 HTTP 요청과 HTML 파싱을 할 수 있어요

1. requests 라이브러리 사용
2. BeautifulSoup으로 HTML 파싱

Lv 2. Scrapy 프로젝트를 생성하고 기본 스파이더를 작성할 수 있어요

Lv 3. CSS와 XPath 선택자로 데이터를 추출할 수 있어요

Lv 4. 아이템 파이프라인을 통해 데이터를 저장할 수 있어요

로그인하고 더 많은 레벨을 확인하세요

Lv 5. 미들웨어로 사용자 에이전트와 프록시를 설정할 수 있어요

Lv 6. 다양한 크롤링 규칙과 자바스크립트 렌더링을 처리할 수 있어요

Lv 7. Docker를 이용해 Scrapy를 배포할 수 있어요

Lv 8. 모니터링과 스케줄링으로 안정적인 크롤러 운영이 가능해요

이 스킬로 지원할 수 있는 채용공고