当前位置：首页 > 资讯 > 焦点关注

python安装requests库

来源： 最后更新：2022-12-07 09:05:37

The Beginning

　　通过前几节课的学习，我们大概了解了通过urllib模块怎么样获取数据、解析数据、保存数据得到我们想要的数据了，今天呢，就给大家介绍一个Python爬虫获取数据的另外一个方法requests库。那么urllib和requests哪个好?urllib和requests有什么区别呢?o68育儿早教网

　　1.requests库怎么安装o68育儿早教网

　　我们已经讲解了Python内置的urllib模块，用于访问网络资源。但是，它用起来比较麻烦，而且，缺少很多实用的高级功能。o68育儿早教网

　　更好的方案是使用requests。它是一个Python第三方库，处理URL资源特别方便。o68育儿早教网

　　requests库的安装与安装其他第三方应用一样(如下图)：o68育儿早教网

　　o68育儿早教网

o68育儿早教网

　　o68育儿早教网

o68育儿早教网

　　2.requests库怎么使用。o68育儿早教网

　　我们以简单的抓取百度网页(https://www.baidu.com/)为例进行操作：o68育儿早教网

　　第一步，导入requests库o68育儿早教网

　　o68育儿早教网

o68育儿早教网

　　第二步，发起请求。o68育儿早教网

　　首先我们需要判断请求类型。最常见的请求方式为 GET 和POST，我们可以通过右击检查-network-headers-Request Method可以看到该页面的请求方式为geto68育儿早教网

　　o68育儿早教网

o68育儿早教网

　　因此我们发起请求的格式为：o68育儿早教网

　　requests.get(网页地址)o68育儿早教网

　　第三步，获取网页内容。o68育儿早教网

　　首先我们需要判断我们获取到的网页是什么类型，同样可通过右击检查o68育儿早教网

　　-network-headers-Content-Type可以看到该网页的内容为text类型o68育儿早教网

　　o68育儿早教网

o68育儿早教网

　　因此我们获取网页的基本格式为:o68育儿早教网

　　response.texto68育儿早教网

　　如下图即可输出网页内容：o68育儿早教网

　　o68育儿早教网

o68育儿早教网

　　第四步，存储网页信息。o68育儿早教网

　　基本格式为：o68育儿早教网

　　with open(保存的文件名,读写模式,encoding="utf-8") as 变量:o68育儿早教网

　　变量.write(网页内容)o68育儿早教网

　　o68育儿早教网

o68育儿早教网

　　以上就是关于requests的用法，我们可以结合之前学过的内容，想想urllib与requests哪个更加方便，以及对于有反爬虫机制的网站，又应该如何用requests获取内容信息,下节课，我们对比一下urllib与requests的区别的是什么?以及urllib与requests哪种更好。o68育儿早教网

o68育儿早教网

THE END

广告、内容合作请点击这里 寻求合作

免责声明：本文系转载，版权归原作者所有；旨在传递信息，其原创性以及文中陈述文字和内容未经本站证实。

所属专题: [db:关键词]  

本文地址:http://www.yuerzaojiao.com/news/jiaodian/379997.html

2022华为荣耀系列哪个性价比高（同价位的华为和荣耀哪个好2020）

网站首页 返回栏目

筛选快捷键是什么（取消筛选快捷键是什么）

最新文章

推荐文章