puppeteer

使用 playwright 在 Nodejs 环境下自动控制浏览器！

Playwright和Puppeteer功能基本一致，但是Puppeteer只支持基于Chromium的浏览器开始初始化项目以及安装依赖//初始当前项目路径，此处应使用你自己定义的路径mkdirplaywright
gwdmf·2023-11-13 18:22

前端大神器——puppeteer无头浏览器

缓存动态文件rendorahttps://github.com/rendora/rendorahttps://www.saashub.com/compare-prerender-vs-rendora
坚持更新·2023-11-08 06:49

Puppeteer开发过程中遇到的问题及解决方案

工欲善其事必先利其器，请先检查本机是否安装NodeJS环境以及查阅API：Google官方文档：https://developers.google.com/web/tools/puppeteerAPI（
m0_67402823·2023-11-07 20:47

网络爬虫和网络数据管理的常见问题集合

puppeteer-extra-plugin-stealth会被检测出来吗？最高强度的爬虫对抗手段是什么？爬虫违法吗？爬虫的难点到底在哪里？爬虫到底有哪些应用场景？网络爬虫用什么编程比较好呢？
PlatonAI·2023-11-04 14:11

nodejs+puppeteer爬取淘宝电商产品信息

nodejs+puppeteer爬取电商网站1.需求2.实现思路3.安装puppeteer4.实现过程5.遇到的一些问题6.总结7.参考博客1.需求需求：前台根据用户从aliexpress关注的产品列表
future_J·2023-11-04 14:38

java 利用chrome+puppeteer实现爬虫

java在进行爬虫过程中会因为网站作出反爬措施，导致抓取的内容不全面，所以需要利用模拟浏览器，打开页面获取到页面的全部内容。本文以腾讯新闻https://news.qq.com/为例。环境配置参考https://www.jianshu.com/p/6c3d90bef17f，可以配置nodejs的环境。一、使用jsoup解析网页，当解析腾讯新闻时只能获取到网页的源码，其他与新闻相关的内容一概获取不到
梦将空·2023-11-04 09:12

puppeteer page.setCookies() 失败注意的问题

测试成功的实例image.png注意问题直接从GoogleChrome内获取的完整Cookie属性不支持SetCookie,例如expires属性遗留问题page.setCookies(cookie[]);//直接设置多条Cookie内容，等待后期验证；其他还有其他问题欢迎留言，互相交流学习！
MC_DEV_JIN·2023-11-01 00:34

详解如何使用VS code搭建JavaScript环境（适合小白）

对于从事自动化测试的同学来说，有很多自动化测试项目是需要使用JavaScript脚本语言进行coding的，包括selenium、playwright、Puppeteer，那么选择哪种IDE合适呢？
测试开发Kevin·2023-10-31 13:26

本来打算做功能测试的，但是发现playwright太好玩了，玩了一天，功能测试进度为空

当我开始使用playwright的时候，嘭的一下，我的世界炸了，要知道在几十分钟前我还在研究puppeteer这个工具，我还觉得puppeteer挺好用，和playwright比起了简直是小巫见大巫了
叶常落·2023-10-30 20:28

基于jest和puppeteer的前端自动化测试实战

前端测试现状经常听到后端同学说“单元测试”，前端写过测试用例的有多少？答案是：并不多，为什么呢？两个主要原因1、前端属于GUI软件，浏览器众多，兼容问题让人头大，用户量有一定规模的浏览器包括：IE8、IE9、IE10、IE11、chrome、FireFox、360浏览器、搜狗浏览器、QQ浏览器……要在这么多浏览器上做几轮测试并不容易2、前端界面变化快，很多时候界面比测试脚本迭代的更快，测试跟不上脚
andrew1989121·2023-10-29 17:03

java无头浏览器_PuppeteerSharp无头浏览器.Net Sdk(Puppeteer)

Puppeteer首先我们需要了解下Puppeteer是谷歌官方出品的一个通过DevTools协议控制headlessChrome的NodeJS库。什么是无头浏览器？通俗点讲就是没有界面的浏览器。
一二三是五六十·2023-10-29 03:48

java无头浏览器_PuppeteerSharp无头浏览器.NetSdk(Puppeteer)

Puppeteer首先我们需要了解下Puppeteer是谷歌官方出品的一个通过DevTools协议控制headlessChrome的NodeJS库。什么是无头浏览器？通俗点讲就是没有界面的浏览器。
王雪竹·2023-10-29 03:48

Puppeteer 无头浏览器简介

Puppeteer是什么Puppeteer是一个Node库，它提供了高级的API并通过DevTools协议来控制Chrome(或Chromium)。
weixin_34313182·2023-10-29 03:18

无头浏览器 和 Puppeteer

什么是无头浏览器无头浏览器即headlessbrowser，是一种没有界面的浏览器。它有浏览器该有的一切功能，除了界面。可以通过命令进行浏览器内的各种操作。我们日常使用浏览器的步骤为：启动浏览器、打开一个网页、进行交互。在无头浏览器中，我们可以通过程序或脚本来执行以上过程，从而模拟出真实的浏览器使用场景。无头浏览器应用场景有了无头浏览器，我们就能做包括但不限于以下事情：对网页进行截图保存为图片或p
胡斐小鱼·2023-10-29 03:48

无头浏览器自动化：Puppeteer 帮你释放效能 | 开源日报 No.64

facebook/reactStars:209.5kLicense:MITReact是一个用于构建用户界面的JavaScript库。它具有以下优势和特点：声明式：React使得创建交互式UI变得轻松。您可以为应用程序中的每个状态设计简单视图，当数据发生更改时，React会高效地更新和渲染恰当的组件。声明性视图使代码更可预测、更易理解且更容易调试。组件化：构建封装了自身状态管理的组件，并将它们组合在
开源服务指南·2023-10-29 03:17

puppeteer截图乱码

最近使用puppeteer来写一个M页的监控工具，部署到linux上运行后发现截图中文乱码了：搜了一些资料，解决方法如下：一、安装fontconfigyum-yinstallfontconfig这个命令执行完成之后
Alinawu·2023-10-27 12:41

如何在Puppeteer中设置User-Agent来绕过京东的反爬虫机制？

正文Puppeteer是一个由Google开发的Node.js库，它提供了高级的API，用于控制无头浏览器（HeadlessBrowser），如Chrome或Chromium。
小白学大数据·2023-10-25 23:08

UI自动化测试中选择页面元素

UI自动化测试中选择页面元素这里讨论的问题，主要是基于HTML的Cucumber+Puppeteer技术栈的UI自动化测试（以下简称UI自动化）中遇到的问题。
周培公·2023-10-22 05:16

深入使用探讨 PuppeteerSharp 抓取 LinkedIn 页面的步骤

PuppeteerSharp是一个基于GoogleChrome的无头浏览器的.NET开发库，它提供了一套强大的API，可以模拟用户在浏览器中的操作。使用Pup
小白学大数据·2023-10-21 12:14

Puppeteer初探

是什么Puppeteer是一个Node库，支持调用Chrome的API来操纵Web。Chrome团队在维护，会拥有更好的兼容性和前景。
tiancai啊呆·2023-10-21 10:10

首屏预渲染方案

prerender-spa-plugin插件原理介绍prerender-spa-plugin利用了Puppeteer的爬取页面的功能。
jy789·2023-10-19 05:08

教你怎么在电脑端下载西瓜视频源文件

搜索到想要的视频打开F12（开发者工具）切换到移动端模式，刷新页面在Network面板下，筛选Media，找到原视频的链接，右键在新标签页打开将上述视频另存为即可使用脚本自动下载人工操作多了就容易烦躁，于是用puppeteer
集成显卡·2023-10-18 23:08

puppeteer生态一览

puppeteer是chrome官方出品的无界面浏览器，我们一般称为无头浏览器。
一个处女座的测试·2023-10-17 09:42

Puppeteer记录操作过程及优秀的开源插件（五）

Puppeteer记录操作过程及优秀的开源插件（五）Puppeteer记录操作过程及优秀的开源插件（五）一、简介二、自动生成测试代码三、优秀的开源插件四、参考案例一、简介本节我们将介绍通过浏览器工具记录用户的实际操作
suwu150·2023-10-17 09:10

Puppeteer v1.5.0 中文翻译

最近用到了Puppeteer这个库，既然用到了这个东西，顺便也就把它的API给看了一遍，为了加深印象，在看的同时也就顺便翻译了一下，不过这API文档的内容量还是蛮大的，花费了好些时间才看完，有些地方不知道怎么翻译比较好
weixin_34021089·2023-10-15 14:59

Puppeteer实现上下滚动、打开新Tab、用户数据保存（三）

Puppeteer实现上下滚动、打开新Tab、用户数据保存（三）Puppeteer实现上下滚动、打开新Tab、用户数据保存（三）一、实现上下滚动二、打开新Tab三、用户数据保存四、效果演示一、实现上下滚动在自动化测试中
suwu150·2023-10-15 14:47

如何搬运视频赚钱？

使用的技术栈是Nodejs，安装Puppeteernpminstallpuppeteer创建一个Puppeteer脚本来访问抖音网站并爬取视频内容。
leeseean89·2023-10-14 23:26

Puppeteer 使用教程-实战篇（爬取图片、视频、音频，页面数据）

目录前言一、获取实体店铺信息二、获取全国各省市县地图json数据三、cookies四、获取网络图片、视频资源五、自动化测试总结前言续上篇，我们简单讲述一下puppeteer常见的应用场景，包括静态页面数据获取
~朴：shu·2023-10-14 22:14

用 puppeteer 实现网站自动分页截取的趣事

最近因为工作中的一个需求，需要针对用户数据页面进行分页并截屏并返回PDF文件，期间用到了puppeteer与HTML分页算法，还找到了一个不错的插件，于是来聊些其中遇到的趣事，先附上目录。
weixin_48726650·2023-10-14 22:14

Nodejs爬虫自动爬取百度图片

本文通过puppeteer实现对百度图片的抓取，这里简单介绍下puppeteerpuppeteer可以使我们编写一套代码控制浏览器动作，“你可以在浏览器中手动执行的绝大多数操作都可以使用Puppeteer
zihanzy.com·2023-10-14 22:14

node puppeteer库爬虫配置(爬取普通请求无法访问的网站)

puppeteer（1）主要用了爬取数据和测试网站性能（2）异步配置安装cnpminstallpuppeteer-Dasyncfunctiontest(){打开浏览器的配置letoptions={//使用无头模式
神奇大叔·2023-10-14 22:43

node puppeteer拦截谷歌请求、设置浏览器响应-爬取电子书链接

(1)拦截谷歌请求:(1)拦截谷歌请求,使用后会激活会激活request.abort,request.continue和request.respond方法。awaitpage.setRequestInterception(true);(2)监听request事件,对请求做出操作一旦启用请求拦截，每个请求都将停止，除非它继续，响应或中止page.on('request',回调函数(request形参
神奇大叔·2023-10-14 22:43

使用puppeteer爬取网站，抓出404无效链接

检查网页无效链接前言自动化技术可以帮助我们做自动化测试，同样也可以帮助我们完成别的事情，比如今天我们要做的检查网站404无效链接。原理实现这样的功能，大致分为以下步骤：1.打开官网首页，获取页面上所有的链接。2.添加规则对这些链接过滤，把外链去掉。3.遍历访问这些链接，打开打开其中的每一个链接，检查是否为404，如果是距离下来。4.重复执行1，2，3。直到把整个网站所有的链接都遍历完。准备Cuke
weixin_34122810·2023-10-14 22:42

使用puppeteer获取网页信息

前言Puppeteer的中文直译是操纵木偶的人，是一个提供顶层API来控制基于DevToolsProtocol的Chrome/Chromium的Node库。
yxlazy·2023-10-14 22:42

puppeteer

本文为使用puppeteer进行自动化测试的实践总结，持续更新。
梦殇918·2023-10-14 22:41

通过puppeteer爬取书籍信息

简单介绍个人理解:就是一个模拟用户对页面操作和获取页面信息,处理页面请求的工具.可以用于爬虫或自动化测试.中文文档puppeteer.js中文文档|puppeteerjs中文网|puppeteer爬虫教程学习看文档就可以
史蒂夫.*·2023-10-14 22:40

node抓图片资源数据

那么下面就介绍下我用到的两款抓包插件：cheerio和puppeteer。
阿离_·2023-10-14 22:40

puppeteer 包模拟登录 模拟iframe网站自动登录

之前写了个chrome扩展来完成公司内部的一个需求。在一个网站上实现了自动化程序，包括登录，后续操作，保持状态，被踢出后再次登录等等。但是这个网站突然前几天更新了登录方式，在登录页面嵌入了iframe，使用内嵌的iframe登录。我还是用chrome扩展试了一下，但是chrome扩展无法操作iframe。只能转换思路，最终群友提供了一个线索，找到了一个google官方出的node包puppetee
缘_妙不可言·2023-10-14 22:10

Nodejs使用puppeteer抓取iOS商店后台APP评论

主要问题登录态、appId的双重验证主要技术栈nodejs、puppeteer实现思路用puppeteer模拟用户操作登录，获取登录态之后访问对应的获取评论接口，读取返回json后传给后端存储。
jiayaner·2023-10-14 22:39

puppeteer做页面监控

为了监测web服务器有无异常，用puppeteer无头浏览器对几个页面做截图爬取然后通过企业微信系统消息发送到群里查看。
jam476·2023-10-14 22:39

Koa2 + Puppeteer打造『爬虫系统』总结8

一.所需技术(1).koa2用于搭建项目(2).puppeteer爬虫库(3).nanoid用于生成随机字符串(4).qiniu用于将资源文件上传至七牛图床(5).sequelize用于操作数据库结构二
可乐雪碧薄荷糖·2023-10-14 22:05

Puppeteer监听网络请求、爬取网页图片（二）

Puppeteer监听网络请求、爬取网页图片（二）Puppeteer监听网络请求、爬取网页图片（二）一、爬取需求二、实现讲解三、效果查看一、爬取需求首先打开浏览器，打开指定网站监听网站发出的所有请求，记录请求
suwu150·2023-10-14 22:34

puppeteer

爬虫优势如何实现爬虫小demo功能二、执行脚本百度搜索脚本demo功能三、获取cookie（这个只能是模拟浏览器当前进入网页的cookie不是平时用的下载的的浏览器的cookie）功能四、监控网页，进行性能分析介绍puppeteer
ArmadaDK·2023-10-13 17:09

数据分析4 - 实战篇

Selenium自动化测试工具当我们做Web自动化测试的时候，可以选用Selenium或者Puppeteer工具。我在第10篇的时候简单介绍过Selenium这个工具，你可以再回顾一下。
请叫我子鱼·2023-10-12 21:58

使用腾讯云TCB云函数抓取微信情报信息

本文是puppeteer在云函数中的简单应用，主要功能为爬取网站上最新的微信产品相关信息。数据来源为新榜资讯。
薛定喵君·2023-10-12 13:32

爬虫进阶-反爬破解6（Nodejs+Puppeteer实现登陆官网+实现滑动验证码全自动识别）

一、Nodejs+Puppeteer实现登陆官网1.环境说明Nodejs——直接从官网下载最新版本，并安装使用npm安装puppeteer:npminstallpuppeteernpminstallxxx-registryhttps
有洁癖的懒羊羊·2023-10-10 17:53

使用 puppeteer 加载 html 文件来运行 js 文件

遇到一个需求,在浏览器环境下来运行jssdk文件,这个js文件是不能运行在nodejs环境下的;所以通过puppeteer无头浏览器来运行代码获取对应的结果。
是阿臻·2023-10-10 12:07

pyppeteer 基本用法和案例

特点自带chromium不用自己下载也可以下载，比较省事.比selenium好用可异步调用简介一.pyppeteer介绍Puppeteer是谷歌出品的一款基于Node.js开发的一款工具，主要是用来操纵
Steven_yang_1·2023-10-08 10:46

Docker 系列 - 05 - 入门 & Puppeteer 服务

本篇文档对应的代码：https://github.com/LiangJunrong/all-for-one/tree/master/037-Docker%20for%20PuppeteerDocker系列文档
JavaScriptLiang·2023-10-07 06:07

Puppeteer 使用教程-基础篇（超详细、超全面）

目录前言一、Puppeteer简介二、Puppeteer中Browser、browserContent、Page的关系三、PuppeteerAPIS3.1、Browser3.2Page3.2.1page.on
~朴：shu·2023-10-07 06:07
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他