爬虫框架Scrapy(西瓜皮)

475次阅读
没有评论
爬虫框架Scrapy(西瓜皮)

Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。

其最初是为了 页面抓取 (更确切来说, 网络抓取 )所设计的, 也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) 或者通用的网络爬虫。

详细介绍见初窥Scrapy

下载Scrapy-2.4.1-py2.py3-none-any.whl (239.7 kB)

下载完把尾缀“whl”修改为“zip”,解压后扔到python安装目录“Lib/site-packages”文件夹,最后cmd运行“pip install scrapy"安装完成。

神龙|纯净稳定代理IP免费测试>>>>>>>>天启|企业级代理IP免费测试>>>>>>>>IPIPGO|全球住宅代理IP免费测试

相关文章:

版权声明:Python教程2022-10-24发表,共计296字。
新手QQ群:570568346,欢迎进群讨论 Python51学习