搜索结果
查询Tags标签： urllib，共有 137条记录-
Python爬虫学习（一）
1.使用urllib库 urllib库是python内置的HTTP请求库，包含4个模块： 1.request：是最基本的http请求模块，可以用来模拟发送请求，就像在浏览器里输入网址按回车一样，只需要给库方法传入URL和其他参数，就可以实现这个过程了。 2.error：异常处理模块。 3.parse：一个工具…
2021/10/5 11:12:52 人评论 次浏览 -
Python爬虫学习（一）
1.使用urllib库 urllib库是python内置的HTTP请求库，包含4个模块： 1.request：是最基本的http请求模块，可以用来模拟发送请求，就像在浏览器里输入网址按回车一样，只需要给库方法传入URL和其他参数，就可以实现这个过程了。 2.error：异常处理模块。 3.parse：一个工具…
2021/10/5 11:12:52 人评论 次浏览 -
Pytho中urllib的简单应用
简单爬取网页内容 # encoding = utf-8 import urllib.request import urllib.parse #解析# Get请求 # response = urllib.request.urlopen("http://www.baidu.com") # print(response.read().decode(utf-8)) # Post data = bytes(urllib.parse.urlencode({"…
2021/10/4 23:13:20 人评论 次浏览 -
Pytho中urllib的简单应用
简单爬取网页内容 # encoding = utf-8 import urllib.request import urllib.parse #解析# Get请求 # response = urllib.request.urlopen("http://www.baidu.com") # print(response.read().decode(utf-8)) # Post data = bytes(urllib.parse.urlencode({"…
2021/10/4 23:13:20 人评论 次浏览 -
定时获取最新ssr服务器的方法
用python3下载最新的ssr服务器地址： 2.pyimport urllib.request import sysimport timetimetag = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime()) print (timetag)url = "https://github.com/Alvin9999/new-pac/wiki/ss%E5%85%8D%E8%B4%B9%E8%B4%…
2021/10/2 23:15:00 人评论 次浏览 -
定时获取最新ssr服务器的方法
用python3下载最新的ssr服务器地址： 2.pyimport urllib.request import sysimport timetimetag = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime()) print (timetag)url = "https://github.com/Alvin9999/new-pac/wiki/ss%E5%85%8D%E8%B4%B9%E8%B4%…
2021/10/2 23:15:00 人评论 次浏览 -
Python爬虫学习笔记9.24
【由于内容定位是个人学习笔记，所以并不适合作为系统的学习材料！！！】关于urlopen() urllib.request.urlopen(url, data=None, [timeout, ]*, cafile=None, capath=None, cadefault=False, context=None)data 参数 data 参数是可选的。如果要添加该参数，并且如果它是字…
2021/9/24 22:10:58 人评论 次浏览 -
Python爬虫学习笔记9.24
【由于内容定位是个人学习笔记，所以并不适合作为系统的学习材料！！！】关于urlopen() urllib.request.urlopen(url, data=None, [timeout, ]*, cafile=None, capath=None, cadefault=False, context=None)data 参数 data 参数是可选的。如果要添加该参数，并且如果它是字…
2021/9/24 22:10:58 人评论 次浏览 -
使用python从地图服务中提取数据
arcgis server 发布的wmts服务，可以下载为lyr 文件，想转为shapefile。 数据不在文件内的，复制要素，另存都无效import urllib.parse, urllib.request, os, arcpyurl = "http://ydt.haxxxxumap.g080/arcgis/rest/services/ghg_2021/MapServer/8/query?"param…
2021/9/17 17:08:06 人评论 次浏览 -
使用python从地图服务中提取数据
arcgis server 发布的wmts服务，可以下载为lyr 文件，想转为shapefile。 数据不在文件内的，复制要素，另存都无效import urllib.parse, urllib.request, os, arcpyurl = "http://ydt.haxxxxumap.g080/arcgis/rest/services/ghg_2021/MapServer/8/query?"param…
2021/9/17 17:08:06 人评论 次浏览 -
【Python 小i机器人的接口实现】
import urllib.request import rewhile True:x = input("主人：")x = urllib.parse.quote(x)link = urllib.request.urlopen("http://nlp.xiaoi.com/robot/webrobot?&callback=__webrobot_processMsg&data=%7B%22sessionId%22%3A%22ff725c236e524…
2021/9/12 22:04:41 人评论 次浏览 -
【Python 小i机器人的接口实现】
import urllib.request import rewhile True:x = input("主人：")x = urllib.parse.quote(x)link = urllib.request.urlopen("http://nlp.xiaoi.com/robot/webrobot?&callback=__webrobot_processMsg&data=%7B%22sessionId%22%3A%22ff725c236e524…
2021/9/12 22:04:41 人评论 次浏览 -
python之quote报错*** KeyError: u‘\uxx‘解决
问题：urllib.quote(xxx)运行后报错*** KeyError: u\uxx 原因：看下xxx类型：<type unicode>，而urllib.quote(params)中的params就是字符串，只能猜测该字符串的编码不符合要求，所以对xxx进行编码 解决：urllib.quote(xxx.encode("utf-8"))或者urllib.q…
2021/9/4 20:08:50 人评论 次浏览 -
python之quote报错*** KeyError: u‘\uxx‘解决
问题：urllib.quote(xxx)运行后报错*** KeyError: u\uxx 原因：看下xxx类型：<type unicode>，而urllib.quote(params)中的params就是字符串，只能猜测该字符串的编码不符合要求，所以对xxx进行编码 解决：urllib.quote(xxx.encode("utf-8"))或者urllib.q…
2021/9/4 20:08:50 人评论 次浏览 -
Python爬虫学习之-从零开始
大家好，相信点进来看的小伙伴都对爬虫非常感兴趣，博主也是一样的。博主刚开始接触爬虫的时候，就被深深吸引了，因为感觉SO COOL啊！每当敲完代码后看着一串串数据在屏幕上浮动，感觉很有成就感，有木有？更厉害的是，爬虫的技术可以应用到很多生活场景中，例如，自动投…
2021/8/26 14:07:02 人评论 次浏览
