搜索结果
查询Tags标签： requests，共有 438条记录-
requests + tkinter 获取网页数据
代码：from tkinter import * import requestswindow = Tk() window.geometry(500x350+500+100) window.title(数据采集)frame = Frame(window) frame.pack()Label(frame,text=请输入网站地址：).pack() address = Entry(frame,width=50) address.pack()Label(frame,text=…
2022/2/26 23:26:20 人评论 次浏览 -
1. 爬虫请求模块
==2. 爬虫请求模块== 2.1 requests模块安装 【1】Linux sudo pip3 install requests【2】Windows python -m pip install requests2.2 常用方法requests.get() 【1】作用 向目标网站发起请求,并获取响应对象【2】参数 2.1> url ：需要抓取的URL地址 2.2>…
2022/2/26 6:22:31 人评论 次浏览 -
python爬虫:爬虫的简单介绍及requests模块的简单使用
python爬虫:爬虫的简单介绍及requests模块的简单使用
2022/2/25 1:27:05 人评论 次浏览 -
Python爬虫：解决SSL证书验证问题
如果目标网站没有设置好HTTPS证书，又或者网站的HTTPS证书不被CA机构认可，用浏览器访问的话，就可能会出现SSL证书错误的提示。用requests库来请求这类网站的话，会直接抛出SSLError错误。requests.exceptions.SSLError: HTTPSConnectionPool(host=ssr2.scrape.center, p…
2022/2/22 14:53:41 人评论 次浏览 -
【python杂记】网络爬虫-1/2 介绍
文章目录 前言一、爬虫爬虫的目标爬虫步骤Robots排除协议 二、函数库介绍1.requests函数库网页请求函数Response对象的属性通用代码框架 2. beautifulsoup4函数库BeautifulSoup类解析内容BeautifulSoup类的基本元素前言 本文记录下关于python爬虫的学习过程和个人见解。一…
2022/2/22 1:24:18 人评论 次浏览 -
python爬虫--Requests库
文章目录 爬虫库Requests1.安装2.发送请求GET请求POST请求复杂的请求方式 3.获取响应爬虫库Requests Requests是Python的一个很实用的HTTP客户端库，完全满足如今网络爬虫的需求。与Urllib对比，Requests不仅具备Urllib的全部功能；在开发使用上，语法简单易懂，完全符合…
2022/2/21 20:57:39 人评论 次浏览 -
python爬虫之requests模块
requests模块使用 requests介绍 python中原生的一款基于网络请求的模块，功能非常强大，简单便捷，效率极高， 作用是模拟浏览器发请求。 requests模块的编码流程指定URL 发送请求 获取相应数据 持久化存储环境安装 pip install requests实战编码 需求：爬取搜狗首页的页面…
2022/2/20 1:13:11 人评论 次浏览 -
懒人必备神器 ，一个创意十足的 Python 命令行工具
相关文件 想学Python的小伙伴可以关注小编的公众号【Python日志】 有很多的资源可以白嫖的哈，不定时会更新一下Python的小知识的哈！！ 正文 当听到某些人说 xx 库非常好用的时候，我们总是忍不住想要去亲自试试。 比百度全家桶，还 tm 的全家桶啊… 也正是因为害怕会污染…
2022/2/13 14:44:50 人评论 次浏览 -
Python使用Requests请求网页
Requests 继承了urllib2的所有特性。Requests支持HTTP连接保持和连接池，支持使用cookie保持会话，支持文件上传，支持自动确定响应内容的编码，支持国际化的 URL 和 POST 数据自动编码。安装方式 利用 pip 安装 $ pip install requests GET请求 基本GET请求（headers参数…
2022/2/10 17:45:02 人评论 次浏览 -
插件——nprogress进度条
nprogress进度条插件需求：打开一个页面时，往往会伴随一些请求，并且会在页面上方出现进度条。原理：在我们发起请求的时候开启进度条，在请求成功后关闭进度条实现：所以只需要在request.js中进行配置，在页面加载时发起了一个请求，此时页面上方出现蓝色进度条，收到响…
2022/2/6 6:12:38 人评论 次浏览 -
mock插件使用
mock插件使用 [官网]mock(模拟)数据，需要用到mock.js插件。 不会和服务器进行任何通信，拦截前端ajax请求，返回我们自定义的数据用于测试前端接口1、下载插件mockjs npm install mockjs --save-dev2、在src中，创建mock文件 3、准备json假数据 （在mock中创建相应的.jso…
2022/2/6 6:12:37 人评论 次浏览 -
Python 爬虫工具
requests $ pip install requestsimport requestskw = {wd:长城}headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/54.0.2840.99 Safari/537.36"}formdata = {"type":…
2022/2/4 17:19:32 人评论 次浏览 -
Request库入门
》》》Request库入门 Request库的7个主要方法 get（） 方法requests.getr = requests.get(url) request库的两个重要对象Response Request 构造一个向服务器请求资源的Request对象返回一个包含服务器资源的Response对象（包含爬虫返回的所有内容，也包含请求的Reque…
2022/2/2 23:42:56 人评论 次浏览 -
Python-requests模块
文章目录 Python-requests模块get()函数(请求百度主页，获取主页的源代码)post()函数(请求百度翻译，返回翻译结果)综合示例Python-requests模块 get()函数(请求百度主页，获取主页的源代码) import requests url = "http://www.baidu.com"resp = requests.get(…
2022/1/29 11:04:16 人评论 次浏览 -
Python 网络教程大全之 04 如何获取url下载文件的大小？
实战需求 如何获取url下载文件的大小？ 解决方案 要通过文件大小限制下载，我们可以从 content-length 标头中获取 filezie，然后按照我们的要求进行操作。 import requestsurl = https://ai2opencode.com/ h = requests.head(url, allow_redirects=True) header = h.head…
2022/1/27 22:34:31 人评论 次浏览
