news 2026/7/22 15:25:30

（Python基础教程之十三）Python中使用httplib2 – HTTP GET和POST示例

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
（Python基础教程之十三）Python中使用httplib2 – HTTP GET和POST示例

学习使用Python httplib2模块。的超文本传输协议（HTTP）是用于分布式，协作，超媒体信息系统的应用协议。HTTP是万维网数据通信的基础。

Python httplib2模块提供了用于通过HTTP访问Web资源的方法。它支持许多功能，例如HTTP和HTTPS，身份验证，缓存，重定向和压缩。

$ service nginx status * nginx is running

我们在本地主机上运行nginx Web服务器。我们的一些示例将连接到本地运行的nginx服务器上的PHP脚本。

目录
检查httplib2库版本
使用httplib2读取网页
发送HTTP HEAD请求
发送HTTP GET请求
发送HTTP POST请求
发送用户代理信息
将用户名/密码添加到请求

检查httplib2库版本

第一个程序打印库的版本，其版权和文档字符串。

#!/usr/bin/python3 import httplib2 print(httplib2.__version__) print(httplib2.__copyright__) print(httplib2.__doc__)

在httplib2.__version__给出的版本httplib2库中，httplib2.__copyright__给出了其版权，以及httplib2.__doc__它的文档字符串。

$ ./version.py 0.8 Copyright 2006, Joe Gregorio httplib2 A caching http interface that supports ETags and gzip to conserve bandwidth. Requires Python 3.0 or later Changelog: 2009-05-28, Pilgrim: ported to Python 3 2007-08-18, Rick: Modified so it's able to use a socks proxy if needed.

这是示例的示例输出。

使用httplib2读取网页

在下面的示例中，我们展示了如何从名为www.something.com的网站获取HTML内容。

#!/usr/bin/python3 import httplib2 http = httplib2.Http() content = http.request("[http://www.something.com](http://www.something.com)")[1] print(content.decode())

使用创建一个HTTP客户端httplib2.HTTP()。使用该request()方法创建一个新的HTTP请求。默认情况下，它是一个GET请求。返回值是响应和内容的元组。

$ ./get_content.py <html><head><title>Something.</title></head> <body>Something.</body> </html>

这是示例的输出。

剥离HTML标签

以下程序获取一个小型网页，并剥离其HTML标签。

#!/usr/bin/python3 import httplib2 import re http = httplib2.Http() content = http.request("[http://www.something.com](http://www.something.com)")[1] stripped = re.sub('<[^<]+?>', '', content.decode()) print(stripped)

一个简单的正则表达式用于剥离HTML标记。请注意，我们正在剥离数据，我们没有对其进行清理。（这是两件事。）

$ ./strip_tags.py Something. Something.

该脚本将打印网页的标题和内容。

检查响应状态

响应对象包含status提供响应状态代码的属性。

#!/usr/bin/python3 import httplib2 http = httplib2.Http() resp = http.request("[http://www.something.com](http://www.something.com)")[0] print(resp.status) resp = http.request("[http://www.something.com/news/](http://www.something.com/news/)")[0] print(resp.status)

我们使用request()方法执行两个HTTP请求，并检查返回的状态。

$ ./get_status.py 200 404

200是成功HTTP请求的标准响应，而404则表明找不到所请求的资源。

发送HTTP HEAD请求

HTTP HEAD方法检索文档标题。标头由字段组成，包括日期，服务器，内容类型或上次修改时间。

#!/usr/bin/python3 import httplib2 http = httplib2.Http() resp = http.request("[http://www.something.com](http://www.something.com)", "HEAD")[0] print("Server: " + resp['server']) print("Last modified: " + resp['last-modified']) print("Content type: " + resp['content-type']) print("Content length: " + resp['content-length'])

该示例打印服务器，上次修改时间，内容类型和www.something.com网页的内容长度。

$ ./do_head.py Server: Apache/2.4.12 (FreeBSD) OpenSSL/1.0.1l-freebsd mod_fastcgi/mod_fastcgi-SNAP-0910052141 Last modified: Mon, 25 Oct 1999 15:36:02 GMT Content type: text/html Content length: 72

这是程序的输出。从输出中，我们可以看到该网页是由FreeBSD托管的Apache Web服务器交付的。该文档的最后修改时间为1999年。网页是HTML文档，其长度为72个字节。

发送HTTP GET请求

HTTP GET方法请求指定资源的表示形式。对于此示例，我们还将使用greet.php脚本：

<?php echo "Hello " . htmlspecialchars($_GET['name']); ?>

在/usr/share/nginx/html/目录内，我们有此greet.php文件。该脚本返回name变量的值，该值是从客户端检索的。

该htmlspecialchars()函数将特殊字符转换为HTML实体；例如＆到＆amp.。

#!/usr/bin/python3 import httplib2 http = httplib2.Http() content = http.request("[http://localhost/greet.php?name=Peter](http://localhost/greet.php?name=Peter)", method="GET")[1] print(content.decode())

该脚本将带有值的变量发送到服务器上的PHP脚本。该变量直接在URL中指定。

$ ./mget.py Hello Peter 这是示例的输出。 $ tail -1 /var/log/nginx/access.log 127.0.0.1 - - [21/Aug/2016:17:32:31 +0200] "GET /greet.php?name=Peter HTTP/1.1" 200 42 "-" "Python-httplib2/0.8 (gzip)"

我们检查了nginx访问日志。

发送HTTP POST请求

POST请求方法请求Web服务器接受并存储请求消息正文中包含的数据。上载文件或提交完整的Web表单时经常使用它。

<?php echo "Hello " . htmlspecialchars($_POST['name']); ?>

在本地Web服务器上，我们有此target.php文件。它只是将过帐的值打印回客户。

#!/usr/bin/python3 import httplib2 import urllib http = httplib2.Http() body = {'name': 'Peter'} content = http.request("[http://localhost/target.php](http://localhost/target.php)", method="POST", headers={'Content-type': 'application/x-www-form-urlencoded'}, body=urllib.parse.urlencode(body) )[1] print(content.decode())

脚本发送name带有Peter值的键的请求。数据使用urllib.parse.urlencode()方法进行编码，并在请求的正文中发送。

$ ./mpost.py Hello Peter

这是mpost.py脚本的输出。

$ tail -1 /var/log/nginx/access.log 127.0.0.1 - - [23/Aug/2016:12:21:07 +0200] "POST /target.php HTTP/1.1" 200 37 "-" "Python-httplib2/0.8 (gzip)"

使用POST方法时，不会在请求URL中发送该值。

发送用户代理信息

在本节中，我们指定用户代理的名称。

<?php echo $_SERVER['HTTP_USER_AGENT']; ?>

在nginx文档根目录下，我们有agent.php文件。它返回用户代理的名称。

#!/usr/bin/python3 import httplib2 http = httplib2.Http() content = http.request("[http://localhost/agent.php](http://localhost/agent.php)", method="GET", headers={'user-agent': 'Python script'})[1] print(content.decode())

该脚本向脚本创建一个简单的GET请求agent.php。在headers字典中，我们指定用户代理。PHP脚本将读取此内容，并将其返回给客户端。

$ ./user_agent.py Python script

服务器使用我们随请求发送的代理名称进行了响应。

向请求添加用户名/密码

客户端的add_credentials()方法设置用于领域的名称和密码。安全领域是一种用于保护Web应用程序资源的机制。

$ sudo apt-get install apache2-utils $ sudo htpasswd -c /etc/nginx/.htpasswd user7 New password: Re-type new password: Adding password for user user7

我们使用该htpasswd工具创建用于基本HTTP身份验证的用户名和密码。

location /secure { auth_basic "Restricted Area"; auth_basic_user_file /etc/nginx/.htpasswd; }

在nginx /etc/nginx/sites-available/default配置文件中，我们创建一个安全页面。领域的名称为“禁区”。

<!DOCTYPE html> <html lang="en"> <head> <title>Secure page</title> </head> <body> <p> This is a secure page. </p> </body> </html>

在/usr/share/nginx/html/secure目录中，我们有上面的HTML文件。

#!/usr/bin/python3 import httplib2 user = 'user7' passwd = '7user' http = httplib2.Http() http.add_credentials(user, passwd) content = http.request("[http://localhost/secure/](http://localhost/secure/)")[1] print(content.decode())

该脚本连接到安全网页；它提供访问该页面所需的用户名和密码。

$ ./credentials.py <!DOCTYPE html> <html lang="en"> <head> <title>Secure page</title> </head> <body> <p> This is a secure page. </p> </body> </html>

使用正确的凭据，脚本将返回受保护的页面。

在本教程中，我们探索了Python httplib2模块。

  1. Python基础教程
  2. 在SublimeEditor中配置Python环境
  3. Python代码中添加注释
  4. Python中的变量的使用
  5. Python中的数据类型
  6. Python中的关键字
  7. Python字符串操作
  8. Python中的list操作
  9. Python中的Tuple操作
  10. Pythonmax（）和min（）–在列表或数组中查找最大值和最小值
  11. Python找到最大的N个（前N个）或最小的N个项目
  12. Python读写CSV文件
  13. Python中使用httplib2–HTTPGET和POST示例
  14. Python将tuple开箱为变量或参数
  15. Python开箱Tuple–太多值无法解压
  16. Pythonmultidict示例–将单个键映射到字典中的多个值
  17. PythonOrderedDict–有序字典
  18. Python字典交集–比较两个字典
  19. Python优先级队列示例
  20. python 中如何格式化日期
  21. 30 分钟 Python 爬虫教程
  22. 爬虫下载网页视频 (video blob.html)
版权声明: 本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若内容造成侵权/违法违规/事实不符，请联系邮箱：809451989@qq.com进行投诉反馈，一经查实，立即删除！
网站建设 2026/7/22 15:24:20

【小程序课程设计/毕业设计】基于Android的智慧建筑施工项目数字化管控 APP 设计 工地施工资源调配与项目管理应用系统【附源码、数据库、万字文档】

博主介绍&#xff1a;✌️码农一枚 &#xff0c;专注于大学生项目实战开发、讲解和毕业&#x1f6a2;文撰写修改等。全栈领域优质创作者&#xff0c;博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战 ✌️技术范围&#xff1a;&am…

作者头像 李华
网站建设 2026/7/22 15:21:04

Python与Hashcat实战：从NTLM哈希破解到密码安全审计

1. 项目概述&#xff1a;从“123456”到专业密码审计 每次看到安全报告里“123456”、“password”这类密码依然高居榜首&#xff0c;作为从业者&#xff0c;心里总不是滋味。这不仅仅是用户习惯问题&#xff0c;更是整个安全链条中最脆弱的一环。今天我们不谈大道理&#xff0…

作者头像 李华
网站建设 2026/7/22 15:19:26

n8n开源自动化工具与AI Agent集成实战

1. 19万星n8n初体验&#xff1a;当开源自动化工具遇上AI Agent 第一次接触n8n是在一个技术社区的推荐帖里&#xff0c;这个标榜"开源版Zapier"的工具当时已经积累了近19万GitHub星标。作为长期在自动化领域摸爬滚打的从业者&#xff0c;我本能地对这类"可视化拖…

作者头像 李华
网站建设 2026/7/22 15:14:11

业务智能体实战笔记：兜底修复——LLM 错了怎么救

系列导航&#xff1a;上一篇&#xff1a;业务智能体实战笔记&#xff08;三&#xff09;&#xff1a;收窄 LLM 决策空间 | 下一篇预告&#xff1a;确定性判定与评测闭环 阅读提示&#xff1a;本文是智能体准确率优化系列第四篇&#xff0c;聚焦四层优化链路的第三层兜底修复。前…

作者头像 李华
网站建设 2026/7/22 15:13:54

嵌入式接口时序设计实战：从OMAP5912手册到PCB布局的完整指南

1. 接口时序&#xff1a;嵌入式硬件设计的“心跳”与“脉搏”在嵌入式硬件设计的江湖里&#xff0c;时序规范手册就像是武功秘籍的总纲&#xff0c;而接口时序&#xff0c;则是其中最核心的内功心法。它不是什么高深莫测的理论&#xff0c;而是确保芯片A和芯片B能“对上话”、不…

作者头像 李华