第四周：网络爬虫之框架 第一讲：Scrapy爬虫框架 1.安装 执行pip install scrapy命令。 安装后小测：执行scrapy -h 2.Scrapy爬虫框架结构 爬虫框架是实现爬虫功能的一个软件结构和功能组件集合。爬虫框架是…

第三周：网络爬虫之实战 第一节：Re（正则表达式）库入门 正则表达式是用来简洁表达一组字符串的表达式。它可以用来表达文本类型的特征。 正则表达式编译：将符合正则表达式语法的字符串转换成正则表达式特征。 1.正则表达式的语法 例如： P(Y|…

第二周：网络爬虫之提取 2.1BeautifulSoup库入门 1.使用BeautifulSoup的方式 from bs4 import BeautifulSoup soup = Beaut…

第一周：网路爬虫之规则 单元1：Requests库入门 1.Requests库综述 表1.1 Requests库的7个主要方法 方法 说明 request() 构造一个请求，支撑以下各方法的基础方法 get() 获取HTML网页的主要方法，…