搜索结果
查询Tags标签： selenium，共有 692条记录-
selenium绕过爬虫特征检测
以下转自：fengzifz 2021年6月17日 Python + selenium 如何绕过爬虫特征检测？在信息时代，数据变得越来越重要。然而并不是每一家公司都是腾讯、百度、知乎、字节跳动等，在日常业务中就可以产生大量的内容或用户数据。很多人在互联网获取数据时，都是使用爬虫获取，而爬…
2021/8/6 23:06:42 人评论 次浏览 -
python+selenium+yaml的自动化操作（基础01）
python+selenium+yaml的自动化操作（基础01） yaml可以存储各种数据：对象、数字、纯量： data：（这是对象） user:‘这是名字’ paswword:‘密码’ 数组：- A 纯量： int: -123 # 导入库 import yaml from selenium import webdriver import time# 打开yaml文件 file = …
2021/8/6 14:05:50 人评论 次浏览 -
python+selenium+yaml的自动化操作（基础01）
python+selenium+yaml的自动化操作（基础01） yaml可以存储各种数据：对象、数字、纯量： data：（这是对象） user:‘这是名字’ paswword:‘密码’ 数组：- A 纯量： int: -123 # 导入库 import yaml from selenium import webdriver import time# 打开yaml文件 file = …
2021/8/6 14:05:50 人评论 次浏览 -
Python之Selenium截取高清大图
from selenium import webdriver from selenium.webdriver import ChromeOptionsoption = ChromeOptions() option.add_argument(--headless) browser = webdriver.Chrome(options=option) browser.set_window_size(15360, 3600) browser.get(https://www.baidu.com) brow…
2021/8/5 1:08:16 人评论 次浏览 -
Python之Selenium截取高清大图
from selenium import webdriver from selenium.webdriver import ChromeOptionsoption = ChromeOptions() option.add_argument(--headless) browser = webdriver.Chrome(options=option) browser.set_window_size(15360, 3600) browser.get(https://www.baidu.com) brow…
2021/8/5 1:08:16 人评论 次浏览 -
Python selenium
数据解析response 方法content 返回二进制响应数据 text 返回字符串 json() 返回json对象正则re.S 单行匹配 re.M 多行匹配 img_src_list = re.findall(ex,img_data,re.S) bs4数据解析 数据解析的原理1.标签定位 2.提取标签、标签属性中存储的数据值bs4数据解析的原理：1.…
2021/8/4 11:06:27 人评论 次浏览 -
Python selenium
数据解析response 方法content 返回二进制响应数据 text 返回字符串 json() 返回json对象正则re.S 单行匹配 re.M 多行匹配 img_src_list = re.findall(ex,img_data,re.S) bs4数据解析 数据解析的原理1.标签定位 2.提取标签、标签属性中存储的数据值bs4数据解析的原理：1.…
2021/8/4 11:06:27 人评论 次浏览 -
动态加载又对及时性要求很高怎么处理？
如何知道一个网站是动态加载的数据？用火狐或者谷歌浏览器 打开你网页，右键查看页面源代码，ctrl +F 查询输入内容，源代码里面并没有这个值，说明是动态加载数据。Selenium+Phantomjs 尽量不使用 sleep 而使用 WebDriverWait
2021/8/3 6:35:58 人评论 次浏览 -
动态加载又对及时性要求很高怎么处理？
如何知道一个网站是动态加载的数据？用火狐或者谷歌浏览器 打开你网页，右键查看页面源代码，ctrl +F 查询输入内容，源代码里面并没有这个值，说明是动态加载数据。Selenium+Phantomjs 尽量不使用 sleep 而使用 WebDriverWait
2021/8/3 6:35:58 人评论 次浏览 -
python-selenium配置环境变量+使用
1、安装selenium pip install selenium2、下载浏览器驱动 Chrome/Firefox要先查看当前浏览器版本是多少：设置->帮助->关于chrome即可查看版本 然后点击浏览器驱动中心https://npm.taobao.org/mirrors/chromedriver找到对应的版本驱动进行下载 3、配置环境变量 我的…
2021/8/2 11:07:20 人评论 次浏览 -
python-selenium配置环境变量+使用
1、安装selenium pip install selenium2、下载浏览器驱动 Chrome/Firefox要先查看当前浏览器版本是多少：设置->帮助->关于chrome即可查看版本 然后点击浏览器驱动中心https://npm.taobao.org/mirrors/chromedriver找到对应的版本驱动进行下载 3、配置环境变量 我的…
2021/8/2 11:07:20 人评论 次浏览 -
Selenium3.0 文档——selenium.webdriver.common.by
selenium.webdriver.common.by.By 支持的定位器分类。 CLASS_NAME = class nameCSS_SELECTOR = css selectorID = idLINK_TEXT = link textNAME = namePARTIAL_LINK_TEXT = partial link textTAG_NAME = tag nameXPATH = xpath
2021/8/1 6:07:31 人评论 次浏览 -
Selenium3.0 文档——selenium.webdriver.common.by
selenium.webdriver.common.by.By 支持的定位器分类。 CLASS_NAME = class nameCSS_SELECTOR = css selectorID = idLINK_TEXT = link textNAME = namePARTIAL_LINK_TEXT = partial link textTAG_NAME = tag nameXPATH = xpath
2021/8/1 6:07:31 人评论 次浏览 -
python 爬虫
# *_* coding:utf-8 *_*# 开发团队:中国软件开发团队 # 开发人员:Administrator # 开发时间:2019/3/23 5:16 # 文件名称:weatherSpider # 开发工具:PyCharmimport tkinter import tkinter.messagebox from tkinter import ttk import requests # from PIL import ImageTk …
2021/7/30 17:08:06 人评论 次浏览 -
python 爬虫
# *_* coding:utf-8 *_*# 开发团队:中国软件开发团队 # 开发人员:Administrator # 开发时间:2019/3/23 5:16 # 文件名称:weatherSpider # 开发工具:PyCharmimport tkinter import tkinter.messagebox from tkinter import ttk import requests # from PIL import ImageTk …
2021/7/30 17:08:06 人评论 次浏览
