搜索结果
查询Tags标签： urllib，共有 137条记录-
Python网络爬虫基本库的使用（大章）
学习爬虫，最基本的操作就是模拟浏览器向服务器发出请求。Pyhton提供了功能齐全的类库来帮助我们实现这些需求。接下来，就让我们从最基础的部分开始了解HTTP库的使用方法吧。 urllib 的使用 版本：在Python2中，有urllib和urllib2两个库来实现请求的发送。而在python3中，…
2022/2/7 17:16:39 人评论 次浏览 -
python urljoin
使用urllib的urljoin()拼接两个地址 urlljoin的第一个参数是基础母站的url，第二个是需要拼接成绝对路径的url。1 2 3 4 5from urllib import parse url1 = "http://www.youtube.com/user/khanacademy" url2 = "123" new_url = parse.urljoin(url1,ur…
2022/1/20 20:15:31 人评论 次浏览 -
python urljoin
使用urllib的urljoin()拼接两个地址 urlljoin的第一个参数是基础母站的url，第二个是需要拼接成绝对路径的url。1 2 3 4 5from urllib import parse url1 = "http://www.youtube.com/user/khanacademy" url2 = "123" new_url = parse.urljoin(url1,ur…
2022/1/20 20:15:31 人评论 次浏览 -
python爬虫基础，小甲鱼，笔记
论一只爬虫的自我修养 ① python如何访问互联网？ python的电池:urllib urllib=url+lib url:网页地址 url由三部分组成： 第一部分是协议：http,https,ftp,file,ed2k 第二部分是存放资源的服务器的域名系统或IP地址（有时候要包含端口号，各种传输协议都有默认的端口号，如…
2022/1/12 22:03:28 人评论 次浏览 -
python爬虫基础，小甲鱼，笔记
论一只爬虫的自我修养 ① python如何访问互联网？ python的电池:urllib urllib=url+lib url:网页地址 url由三部分组成： 第一部分是协议：http,https,ftp,file,ed2k 第二部分是存放资源的服务器的域名系统或IP地址（有时候要包含端口号，各种传输协议都有默认的端口号，如…
2022/1/12 22:03:28 人评论 次浏览 -
Python爬虫：1_爬取一个网页
from urllib.request import urlopenurl = http://www.baidu.comresp = urlopen(url)with open(mybaidu.html, mode=wb) as f:f.write(resp.read())print(over) urllib:该库可操作URL urllib.request：打开/读取url urllib.error：有urllib.request抛出的异常 urllib.pars…
2022/1/5 20:04:40 人评论 次浏览 -
Python爬虫：1_爬取一个网页
from urllib.request import urlopenurl = http://www.baidu.comresp = urlopen(url)with open(mybaidu.html, mode=wb) as f:f.write(resp.read())print(over) urllib:该库可操作URL urllib.request：打开/读取url urllib.error：有urllib.request抛出的异常 urllib.pars…
2022/1/5 20:04:40 人评论 次浏览 -
Python爬虫：如何爬取一个网站的源码？
# 使用urllib来获取百度首页的源码 import urllib.request# (1)定义一个url 就是你要访问的地址 url = http://www.baidu.com# (2)模拟浏览器向服务器发送请求 response响应 response = urllib.request.urlopen(url)# （3）获取响应中的页面的源码 content 内容的意思 #…
2022/1/4 20:04:30 人评论 次浏览 -
Python爬虫：如何爬取一个网站的源码？
# 使用urllib来获取百度首页的源码 import urllib.request# (1)定义一个url 就是你要访问的地址 url = http://www.baidu.com# (2)模拟浏览器向服务器发送请求 response响应 response = urllib.request.urlopen(url)# （3）获取响应中的页面的源码 content 内容的意思 #…
2022/1/4 20:04:30 人评论 次浏览 -
【Python学习笔记】简单调用百度API应用
#本文一切代码及理论均来自于郑秋生、夏敏捷二位老师主编《Python项目案例发 从入门到实践》一书，本人仅做微改。创作本文的目的仅为总结本人的学习过程和成果，借此巩固。可能存在许多疏漏之处，还请各位同道多多批评指正。今天学的是调用百度API一个章节，百度大家都熟…
2022/1/2 20:10:02 人评论 次浏览 -
【Python学习笔记】简单调用百度API应用
#本文一切代码及理论均来自于郑秋生、夏敏捷二位老师主编《Python项目案例发 从入门到实践》一书，本人仅做微改。创作本文的目的仅为总结本人的学习过程和成果，借此巩固。可能存在许多疏漏之处，还请各位同道多多批评指正。今天学的是调用百度API一个章节，百度大家都熟…
2022/1/2 20:10:02 人评论 次浏览 -
python爬虫基础使用urllib
# urllib基础操作 # 爬虫基础-Urllib发送请求import urllib.request import urllib.parse# 目标网址（一个竞赛网址） url = https://www.datafountain.cn/competitions# 通过request配置请求参数urllib. request. Request ( url, data=None, headers={}, origin_req_host…
2021/12/27 20:08:23 人评论 次浏览 -
python爬虫基础使用urllib
# urllib基础操作 # 爬虫基础-Urllib发送请求import urllib.request import urllib.parse# 目标网址（一个竞赛网址） url = https://www.datafountain.cn/competitions# 通过request配置请求参数urllib. request. Request ( url, data=None, headers={}, origin_req_host…
2021/12/27 20:08:23 人评论 次浏览 -
Python中对字符串进行Url加解密操作
目录 quote：对字符串进行UrlEncode操作 urlencode： 对字典进行加密 unquote： 对字符串进行解码操作quote：对字符串进行UrlEncode操作 import urllib.parses=长春 s=urllib.parse.quote(s) print(s)# %E9%95%BF%E6%98%A5 urlencode： 对字典进行加密 from urllib.par…
2021/12/27 17:08:24 人评论 次浏览 -
Python中对字符串进行Url加解密操作
目录 quote：对字符串进行UrlEncode操作 urlencode： 对字典进行加密 unquote： 对字符串进行解码操作quote：对字符串进行UrlEncode操作 import urllib.parses=长春 s=urllib.parse.quote(s) print(s)# %E9%95%BF%E6%98%A5 urlencode： 对字典进行加密 from urllib.par…
2021/12/27 17:08:24 人评论 次浏览
