什么是爬虫。简单一句话就是代替人去模拟浏览器进行网页操作。

爬虫的作用。为其他程序提供数据源，如搜索引擎(百度、Google等)、数据分析、大数据等等。

爬虫又分为这分类:分为通用爬虫(搜索引擎、聚焦爬虫(12306抢票) 、增量式网络爬虫（Incremental Web Crawler）和深层网络爬虫。

掌握爬虫具体要学习哪些知识点了？

（一）库的安装
（二）爬虫的基本原理
（三）urllib库详解
（四）Requests库的基本使用
（五）正则表达式
（六）BeautifulSoup库详解
（七）PyQuery详解
（八）Selenium库详解

在这边小编简单概述了，掌握爬虫大概要学的一些知识点。

想了解更详细的，从零基础入门到爬虫精通的详细学习知识点。

点击了解更多