首页 > TAG信息列表 > Browser
【web自动化】selenium根据浏览器版本下载对应的chromedriver
1、使用国内的镜像地址 https://registry.npmmirror.com/binary.html?path=chromedriver/ 2、通过simulation模拟用户点击来下载（只贴出部分方法） #!/usr/bin/env python # -*- coding:utf-8 -*- import os import platform import signal import time import allure import【数据库】SQLite数据库 工具
SQLite数据库查看工具SQLite是我们在开发中常见的数据库，例如我们在开发Android时，需要查看App生成的数据库内容，这时就需要用到一些工具来帮助我们打开并查看数据库文件。DB Browser for SQLite本文介绍的是一款非常实用的，开源版SQLite数据库辅助工具：DB Browser for SQLite。它是一模拟浏览器滚动条持续向下滚动
文件目录结构 D:. chromedriver.exe 浏览器向下滑动.py 代码 from selenium import webdriver import time import random def roll_window_to_bottom(browser, stop_length=None, step_length=100000000000): """selenium 滚动当前页面，向下滑 :param browser:爬虫之selenium
目录selenium介绍基本使用selenium用法元素操作等待元素被加载元素各项属性执行js代码切换选项卡浏览器前进后退无界面浏览器异常处理登录获取cookie保存 selenium介绍 由于requests模块不能执行js，有的页面内容，我们在浏览器中可以看到，但是请求下来没有。 selenium模块：模拟操作浏览Playwright简单试用
距上篇关于playwright文章过去有一年多了，主要是因为加上早期的playwright并不是很成熟，缺少我最常用到的直接通过CDP（chrome dev protocol）来连接的这种场景的支持。加上我用它也只是作为写蜘蛛程序玩下，今天在再看了下playwright后，发现现在playwright已经完善了不少，不仅支持通过cdp的Storage、Cookies(Browser对象)
localStorage 特点 只读 允许存储键值对的数据。 长期保存网站数据，没有过期时间，直到手动删除 localStorage将第一次请求的数据直接存储到本地，相当于一个5M大小的针对前端的页面数据库，相比于 cookie 可以节约带宽。 局限 localStorage的数据类型默认为String，用到JSON时需要进行Selenium的基本使用
环境配置 1.在pycharm中下载Selenium 2.谷歌浏览器驱动程序下载地址： http://chromedriver.storage.googleapis.com/index.html 简单小例子 import time from selenium import webdriver # 设置自动化打开的浏览器访问网址 url = 'https://www.cnblogs.com/' # 设置谷歌浏览自动化构建
目录背景自动化构建体验案例缺点改进（NPM scripts） 背景 一切重复工作本应自动化，自动化构建是前端工程化非常重要的组成部分。 自动化：就是通过机器去代替手工完成一些工作。 构建：把一个东西转换成另一个东西。 自动化构建：将开发过程中的源代码自动化的转换成生产环境中可以'gbk' codec can't encode character解决方法
一. 问题：在将网络数据流导入文件时，有可能遇到“'gbk' codec can't encode characte”错误。 二. 分析： 1.在windows下面，新文件（即写入的目标文件）的默认编码是gbk。 2.网络数据流的编码是utf-8。 python解释器会用gbk编码去解析utf-8的网络数据流，于是报错。 三.解决如下，指定目python+selenium web自动化
前置环境：python3.7，pycharm2019.3.3 1.selenium安装 pip install selenium 查看是否安装成功：pip show selenium 2.driver安装 可使用不同浏览器（chrome, firefox, IE等）的driver。 使用chromedriver，下载chromedriver.exe，放到python的Script路径下。 chromedriver下载： Chrome浏览器VorlonJS和Browsersync移动调试工具
VorlonJs 微软推出的移动调试工具，可以配合phpstudy使用，在电脑上测试手机页面 phpstudy官网下载，傻瓜安装，安装打开即可启动模拟服务器，将要查看的页面目录放置WWW这个目录下，然后查询本机ip打开页面（可以将链接生成二维码，直接手机扫码打开） node 安装node，直接官网下载，傻瓜安装，安selenium设置Chrome代理、UA和Cookie
一、selenium设置Chrome User-Agent+代理先上代码这里我直接用的UA轮子，随机取出一个来设置 from selenium import webdriver from selenium.webdriver.chrome.options import Options from fake_useragent import UserAgent headers = {'User-Agent': UserAgent().random} #从UA爬虫_selenium_Phantomjs(停更了)
1.什么是Phantomjs？ （1）是一个无界面的浏览器 （2）支持页面元素查找，js的执行等 （3）由于不进行css和gui渲染，运行效率要比真实的浏览器要快很多 2.如何使用Phantomjs? 获取PhantomJS.exe文件路径path browser=webdriver.PhantomJS(path) browser.get(url) 扩展： 保存屏幕快照 ：browser.save_sc# How Browser Works
目录1. Navigation1.1 DNS Lookup1.2 TCP Handshake1.3 TLS Negotiation#协商2. Response2.1 TCP Slow Start / 14KB rule2.2 Congestion control#拥阻控制3. Parsing3.1 Building the DOM tree3.2 Preload scanner3.3 Building the CSSOM4. Other Processes4.1 JavaScript Compil使用NPM Scripts打造简单的自动化构建工作流
1、使用NPM Scripts包装构建命令 （1）在package.json中添加“scripts”字段 package.json "scripts": { "build":"sass scss/main.scss css/style.css" }, 添加完后完整的是下面这个样子的 { "name": "scss", "version":解决File Browser运行时因锁定数据库而无法插入用户的问题
File Browser（文件浏览器）是一种基于GO语言开发的开源轻量级文件管理系统，它能够在浏览器上管理你的文件，让您可以在浏览器上使用查看、下载、修改等各种功能。 你可以把它当作私有云盘来使用。 File Browser最吸引我的地方就是可以通过shell命令进行管理，通过 filebrowser config 等等华为云对象存储客户端OBS Browser+下载
一、下载 网址：https://support.huaweicloud.com/browsertg-obs/obs_03_1003.html 下载之后的文件如下： 二、安装 解压下载的软件包，如下： 运行“obs-browser-plus Setup xxx.exe”完成OBS Browser+工具安装。 点击下一步，选择路径：D:\install\obs-browser-plus 点击完成selenium
一 介绍 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 selenium本质是通过驱动浏览器，完全模拟浏览器的操作，比如跳转、输入、点击、下拉等，来拿到网页渲染之后的结果，可支持多种浏览器 from selenium import webdriverpuppeteer 13.0.0 版本后，生成图片比之前的版本慢
如题，版本从12.0.1切换到13.0.0后，html生成图片的速度比之前慢了将近一倍，多方查找，发现，启动puppeteer的时候传入了这样的配置： const puppeteer = require('puppeteer'); const browser = puppeteer.launch({ headless: true, args: [ '--use-gl=swiftshader',CefSharp使用
1，安装 CefSharp.WinForms 2，禁用鼠标右键： ①新建类： class MenuNoneHandler : IContextMenuHandler { public void OnBeforeContextMenu(IWebBrowser chromiumWebBrowser, IBrowser browser, IFrame frame, IContextMenuParams parameters, IMenuModel model)通过PuppeteerSharp+Chromium代理刷页面点击量
LaunchOptions options = new LaunchOptions { Headless = true, ExecutablePath = @".local-chromium\Win64-901912\chrome-win\chrome.exe", Args = new[] {校园网认证脚本
适用于铁皮大学 软件测试上学了selenium的使用，于是想到用selenium写一个校园网自动认证的程序，减少打开浏览器填写密码费时费力 能直接运行的可执行文件已上传至GitHub，无需python环境即可点击运行，使用nuikta打包（pyinstall依赖老导不进来 项目地址：Arisf0617/std-connection: 石铁大推特 HTML 网页的前10行代码（英文）
推特 HTML 网页的前10行代码（英文） 作者面试前端程序员时，经常打开推特的 HTML 网页源码，让应聘者解释前10行代码（上图）每一行的目的。 Explain the First 10 Lines of Twitter’s Source Code to Me For the past few weeks, I’ve been hiring for a senior full-stack JavaScripy导出时段报表
py导出时段报表 昨天做的任务，一天下来各种杂事，白天也时不时摸鱼，搞到晚上回家继续弄。今早弄些细节基本算完成~~~ 这个脚本跟之前的最大区别，进去报表导出页面后，条件选择需要先点击下拉框，再选择地市或导出格式；另外一点，选择时间查询（前一天）的时候，先要抹掉默认值（用clear方法）再Cypress设置chrome浏览器运行自启动开发者工具
在plugins-》index.js文件末尾加上这一块代码，更详细的内容查看文档中的plugins相关内容 https://docs.cypress.io/api/plugins/browser-launch-api#Syntax module.exports = (on, config) => { on('before:browser:launch', (browser = {}, launchOptions) => {