Python之进行URL编码案例讲解_python_脚本之家

为什么要对URL进行encode

在写网络爬虫时，发现提交表单中的中文字符都变成了TextBox1=%B8%C5%C2%CA%C2%DB这种样子，观察这是中文对应的GB2312编码，实际上是进行了GB2312编码和urlencode。

那么为什么要对URL进行encode？

因为在标准的url规范中中文和很多的字符是不允许出现在url中的。为了字符编码（gbk、utf-8）和特殊字符不出现在url中，url转义是为了符合url的规范。

urlencode编码：urllib中的quote方法

import urllib.parse chinese_str = '中文' # 先进行gb2312编码 chinese_str = chinese_str.encode('gb2312') # 输出 b'\xd6\xd0\xce\xc4' # 再进行urlencode编码 chinese_str_url = urllib.parse.quote(chinese_str) # 输出 %D6%D0%CE%C4

urldecode解码：urllib中的unquote方法

# 由于编码问题会报错，还未解决 urllib.parse.unquote('%D6%D0%CE%C4') # ：的url编码为%3A，可输出 http://www.baidu.com urllib.parse.unquote('http%3A//www.baidu.com')

URL中%u开头的字符

在网页的表单参数中，还遇到过%u开头的字符，得知是中文对应的Unicode编码值

以下代码可以实现字符与unicode编码值的转换

str = '姓名' # 获得urlencode编码 str = str.encode('unicode_escape') print(str) # 输出 b'\\u59d3\\u540d' str=str.decode('utf-8') print(str) # 输出 \u59d3\u540d str=str.encode('utf-8') print(str) # 输出 b'\\u59d3\\u540d' str=str.decode('unicode_escape') print(str) # 输出姓名

hidden隐藏域对象作为表单参数

在爬取ASP.NET平台的网站信息时，有VIEWSTATE、EVENTVALIDATION这样的hidden隐藏域对象，作为表单参数发送post请求，所以需要从网页源代码中获取。

但post请求中的参数值是URL编码值，而网页源码中获取到的是URL解码值，所以需要进行urlencode编码。

# 网页源码上得到之后，需要urlencode编码 hid['VIEWSTATE'] = urllib.parse.quote(soup.find(id="__VIEWSTATE")['value'])

谷歌浏览器的开发者工具中可以查看参数的urlencode和decode值

在线URL编码/解码工具

可选择编码格式为UTF-8或GB2312

汉字字符集编码查询

可查汉字的GB2312等中文编码和Unicode编码

python中的urlencode和urldecode(代码)

到此这篇关于Python之进行URL编码案例讲解的文章就介绍到这了,更多相关Python之进行URL编码内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

您可能感兴趣的文章:

python实现对excel中需要的数据的单元格填充颜色

这篇文章主要介绍了python实现对excel中需要的数据的单元格填充颜色，文章围绕主题展开详细单元格填充介绍，具有一定的参考价值，需要的小伙伴可以参考一下
2022-06-06
Python实现二叉搜索树BST的方法示例

这篇文章主要介绍了Python实现二叉搜索树BST的方法示例，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2019-07-07
Python序列之list和tuple常用方法以及注意事项

这篇文章主要介绍了Python序列之list和tuple常用方法以及注意事项,sequence(序列)是一组有顺序的对象的集合,序列可以包含一个或多个元素,也可以没有任何元素,序列有两种：list (表) 和 tuple（元组）,需要的朋友可以参考下
2015-01-01
利用Python循环(包括while&for)各种打印九九乘法表的实例

下面小编就为大家带来一篇利用Python循环(包括while&for)各种打印九九乘法表的实例。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧，希望对大家有所帮助
2017-11-11
python里的条件语句和循环语句你了解多少

这篇文章主要为大家详细介绍了python的条件语句和循环语句，使用数据库，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
2022-02-02
TensorFlow卷积神经网络AlexNet实现示例详解

这篇文章主要为大家介绍了TensorFlow卷积神经网络AlexNet实现示例详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步
2021-11-11
对Python实现累加函数的方法详解

今天小编就为大家分享一篇对Python实现累加函数的方法详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2019-01-01
基于Python实现签到脚本过程解析

这篇文章主要介绍了基于Python实现签到脚本过程解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
2019-10-10
使用python将mysql数据库的数据转换为json数据的方法

这篇文章主要介绍了使用python将mysql数据库的数据转换为json数据的方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2019-07-07
Django 使用easy_thumbnails压缩上传的图片方法

今天小编就为大家分享一篇Django 使用easy_thumbnails压缩上传的图片方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2019-07-07