浏览器地址栏搜索刘若英
https://www.baidu.com/s?word=刘若英&tn=71069079_1_hao_pg&ie=utf-8
但是复制到文件中是这样的：
https://www.baidu.com/s?word=%E5%88%98%E8%8B%A5%E8%8B%B1&tn=71069079_1_hao_pg&ie=utf-8

这是因为浏览器对中文请求参数进行了转码
用代码访问网站所发的请求中如果有中文也必须是转码之后的。这里需要用到urllib.parse.urlencode 方法。
这个方法的作用就是将字典里面所有的键值转化为query-string格式（key=value&key=value），并且将中文转码

import urllib.request
import urllib.parse
import os

url = ‘http://www.baidu.com/s?’

wd = input('请输入要搜索关键字： ')
“”"
word=刘若英&tn=71069079_1_hao_pg&ie=utf-8
“”"
data = {
‘word’: wd,
‘tn’: ‘71069079_1_hao_pg’,
‘ie’: ‘utf-8’
}

query_string = urllib.parse.urlencode(data)

拼接获取完整url

url += query_string

发起请求，获取响应

response = urllib.request.urlopen(url=url)

filename = wd + ‘.html’

dirname = ‘./html’

if not os.path.exists(dirname):
os.mkdir(dirname)

filepath = dirname + ‘/’ + filename

以二进制写入文件

with open(filepath, ‘wb’) as fp:

fp.write(response.read())

或者以utf8编码写入文件

with open (filepath, ‘w’, encoding=‘utf8’) as fp:
fp.write(response.read().decode(‘utf8’))

作者：米酒真香
链接：https://www.jianshu.com/p/cfb411ba7167
来源：简书
著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。

[转载]urllib.parse.urlencode转换get请求参数（resquest中带中文的情况）相关推荐

一木.溪桥学爬虫-03：请求模块urllib、 urllib.request、urllib.parse.urlencode、urllib.parse.quote(str)、.unquote()
一木.溪桥在Logic Education跟Jerry学爬虫 07期:Python 爬虫一木.溪桥学爬虫-03:请求模块urllib. urllib.request.urllib.parse.ur ...
详解Python3的urllib.parse.urlencode函数
参考资料: Python3的urllib.parse常用函数小结 data=bytes(urllib.parse.urlencode({"name":"Jack" ...
urlencode quote unquote (url 中带中文参数)
目录: urlencode & quote & unquote (url 中带中文参数) python httplib urllib urllib2区别(一撇) 当url地址含有中文或 ...
详解Spring MVC请求参数类型，解决中文乱码问题，自定义类型转换器，Spring MVC相关注解
#SpringMVC SpringMVC请求简单类型简单类型包括:基本类型,基本类型的包装类型,字符串编写Controller @RequestMapping("/param" ...
java发送get请求参数_HttpClient发送带参数的Get请求
HttpClient 是apache 组织下面的一个用于处理HTTP 请求和响应的开源工具.所用jar包为httpclient-4.3.6.jar.httpcore-4.3.3.jar.httpmim ...
java utf8 简繁转换类库_在Java中进行中文繁体简体转换，基于OpenCC（Open Chinese Convert）方案...
一.OpenCC介绍 OpenCC (Open Chinese Convert,开放中文转换) 是一个用于中文简繁转换的开源项目,支持词汇级别的转换.异体字转换和地区习惯用词转换(中国大陆.台湾.香港 ...
python get方法请求参数_python中requests库get方法带参数请求
起因是想爬五等分的花嫁的漫画.这是其中的一个坑先上代码 data={'cid':567464,'page':1,'key':'','language':1,'gtk':6,'_cid':567464 ...
js获取url中的参数,url中传递中文的时候通过js解码的方式
如果传递的参数是: <a href="${pageContext.request.contextPath}/productdisplay/productDisplay_productD ...
urllib.parse
1 url分解 import urllib.parse 2 3 result = urllib.parse.urlparse('http://www.baidu.com') 4 print(resul ...

[转载]urllib.parse.urlencode转换get请求参数（resquest中带中文的情况）