github.devotd.
新发现数据

scrapy/scrapy 2.19.0 — Python 网页爬取与抓取框架

scrapy/scrapy 是一个用 Python 爬取网页并提取结构化数据的框架,其在 GitHub 上的最新版本是 2.19.0。

仓库信息scrapy/scrapy ↗

scrapy/scrapy 是一个用 Python 爬取网页并提取结构化数据的框架,其在 GitHub 上的最新版本是 2.19.0。

GitHub 项目说明: Scrapy, a fast high-level web crawling & scraping framework for Python.

星标
★ 64.9K
复刻
12K
语言
Python
许可证
BSD-3-Clause
最新版本
2.19.0
查看原始来源 ↗在 GitHub 查看 ↗

scrapy/scrapy 的最新版本是 2.19.0。Scrapy 是一个用 Python 编写的网页爬取与抓取框架,用来遍历网站并抽取结构化数据。

爬取是在网站中四处移动、收集页面的工作,而抓取是从收集到的页面中只提取出所需数值的работ。Scrapy 将这两者结合起来,专注于从网站中提取结构化数据。仓库描述称自己是一个面向 Python 的快速高层网页爬取与抓取框架。README 说明它可以在多个平台上使用,需要 Python 3.11 或更高版本,并由 Zyte 和多位贡献者维护。安装方式为 pip install scrapy,使用方法可在文档中查看。实现语言是 Python,许可证是 BSD-3-Clause。仓库创建于 2010 年 2 月 22 日,GitHub 星标数为 64921。

不过,仅凭这份记录能够判断的事情是有限的。2.19.0 没有发布说明和变更清单,因此无法知道本次版本修复了什么。也没有给出与其他爬取工具对比的性能数据或评估标准。剩下的评分只有势能(momentum) 5.4,而新颖性、技术和质量评分均为空。除了这是一个长期持续的项目及其累积星标数之外,这份记录中没有任何证据能说明本次版本的改进幅度。因此,是否采用 2.19.0,最好在直接查看发布说明之后再做决定。