javascript 一个简单的puppeteer例子 作用是抓取掌阅书城里男频女频各分类的已完结书籍信息。前面的pids和cids这两个常数数组都是事先在页面上查看超链接收集的。这个页面没有任何反爬措施，适合作为简单例子。
无分类 使用puppeteer-实现对Antd-Select-组件自动化测试 项目需要使用jest+puppeteer 实现对Antd组件库中的Select组件进行操作，选中其中的某一项的值。测试页面为Antd Select
无分类 前端UI自动化测试TypeScriptJestPuppeteer 最近几个月来，笔者一直在探索前端UI自动化测试的场景和方案。最初的时候，面对众多的技术选型，显得有些茫然，而团队此前也没有太多关于这方面的经验，只能一步一步摸索总结，当然期间也踩过不少坑，最终形成了…
javascript 网页应该如何录屏呢 摘要： 网页应该如何录屏呢？ 作者：Winty 原文：用户行为录帧调研 Fundebug经授权转载，版权归原作者所有。 关键点 首先，每一次会话都有一个唯一的session ID，这是串联起所有行为的纽带。 其次，用户行为又分…
javascript puppeteer爬虫 利用空闲时间，学习了下puppeteer爬虫，我也想爬取下网上的资源 1.部分api puppeteer.launch(options) 参数名称 参数类型 参数说明 ignoreHTTPSErrors boolean 在请求的过程中是否忽略 Https 报错信息，默认为 fa…
javascript 如何避免Puppeteer被前端JS检测 这两天开始看puppeteer，发现居然也能被前端js检测出来！？github的issue区找了找，原来puppeteer启动的chrome里面，是有navigator.webdriver属性的，搞什么搞么，老外真是做那啥还要立牌坊Orzissue里也看到了解…
无分类 信息检索课程实验笔记 注：前端不相关—只是用node实现了一下如何爬网站数据（大学课程的实验） 网页索引与检索 实验目的 l 了解搜索引擎的工作原理及实现方法；l 熟悉倒排索引的创建；l 掌握查询处理技术。 实验要求 l 独立或合作（1…
javascript 免费使用谷歌的翻译接口 但谷歌的未提供免费接口，研究了谷歌的翻译页面，输入内容后会触发ajax请求，请求参数中除了输入内容，还有个加密参数tk，该加密算法在压缩的js代码中，我也在网上找到了网友摘出来的代码，js格式，一大段，压缩…
javascript puppeteer-多URL爬取 基本使用 {代码…} 顺序不能变 ： await puppeteer.launch() 启动 await browser.newPage() 打开page page.on 监听事件 await page.goto 跳转页面 await browser.close() 关闭 顺序改变,page.on() 监听事件将无…
javascript 手把手教你如何用Crawlab构建技术文章聚合平台(一) 说到爬虫，大多数程序员想到的是scrapy这样受人欢迎的框架。scrapy的确不错，而且有很强大的生态圈，有gerapy等优秀的可视化界面。但是，它还是有一些不能做到的事情，例如在页面上做翻页点击操作、移动端抓取等…
