github.devotd.
새 소식데이터

scrapy/scrapy 2.19.0 — Python 웹 크롤링·스크래핑 프레임워크

scrapy/scrapy는 Python으로 웹사이트를 크롤링해 구조화된 데이터를 추출하는 프레임워크이며, GitHub의 최신 릴리스는 2.19.0이다.

저장소 정보scrapy/scrapy ↗

scrapy/scrapy는 Python으로 웹사이트를 크롤링해 구조화된 데이터를 추출하는 프레임워크이며, GitHub의 최신 릴리스는 2.19.0이다.

GitHub 설명: Scrapy, a fast high-level web crawling & scraping framework for Python.

스타
★ 64.9K
포크
12K
언어
Python
라이선스
BSD-3-Clause
최신 릴리스
2.19.0
원문 보기 ↗GitHub에서 보기 ↗

scrapy/scrapy의 최신 릴리스는 2.19.0이다. Scrapy는 Python으로 만든 웹 크롤링·스크래핑 프레임워크로, 웹사이트를 훑어 구조화된 데이터를 뽑아 내는 도구다.

크롤링은 사이트를 돌아다니며 페이지를 모으는 일이고, 스크래핑은 모은 페이지에서 필요한 값만 떼어 내는 일이다. Scrapy는 이 둘을 묶어 웹사이트에서 구조화된 데이터를 추출하는 데 초점을 둔다. 저장소 설명은 자신을 Python을 위한 빠른 상위 수준 웹 크롤링·스크래핑 프레임워크라고 밝힌다. README는 여러 플랫폼에서 쓸 수 있고 Python 3.11 이상이 필요하다고 적으며, Zyte와 여러 기여자가 관리한다고 밝힌다. 설치는 pip install scrapy로 하고 사용법은 문서에서 확인할 수 있다. 구현 언어는 Python이고 라이선스는 BSD-3-Clause다. 저장소는 2010년 2월 22일 만들어졌고 GitHub 스타는 64921개다.

다만 이 기록으로 판단할 수 있는 데에는 한계가 있다. 2.19.0의 릴리스 노트와 변경 목록이 없어 이번 버전이 무엇을 고쳤는지 알 수 없다. 다른 크롤링 도구와 비교한 성능 수치나 평가 기준도 주어지지 않았다. 남은 점수는 모멘트(momentum) 5.4뿐이고 참신성·기술·품질 점수는 비어 있다. 오래 이어져 온 프로젝트라는 사실과 누적 스타 수 외에는 이번 버전의 개선 폭을 보여 주는 근거가 이 기록에 없다. 그래서 2.19.0을 채택할지는 릴리스 노트를 직접 확인한 뒤에 정하는 편이 맞다.