不乖的肥猫
不乖的肥猫

第七步：简单爬虫与网页测试

Puppeteer

官方文档：https://puppeteer.bootcss.com/

1、安装

  • puppeteer是一个node插件
  • 安装命令：npm i puppeteer

2、概念

  • 无头浏览器：就是不打开浏览器的页面，直接进行浏览器后台操作

3、入门

  1. 引入：import puppeteer from "puppeteer"
  2. 创建浏览器：const browser = await puppeteer.launch([options])
  3. 创建新页面：const page = await browser.newPage()
  4. 然后就可以使用page进行页面的相关操作了
  5. 操作完成后就可以关闭：await browser.close()

4、puppeteer

  • puppeteer.launch([options])：打开一个浏览器，异步成功返回一个browser浏览器操作对象
    • headless：是否开启无头浏览器，默认true
    • defaultViewpord: 为每个页面设置一个默认视图窗口大小，默认800*600
      • width：页面宽度
      • height：页面高度
      • deviceScaleFactor：dpr，默认为1
      • null：设置为null就禁用视图窗口
    • args：给浏览器实例传递的其他参数
      • “–window-size=1920,1080”：将窗口调整为1920*1080

      • 5、browser

      • browser.newPage()：异步成功返回一个page页面操作对象
      • browser.close()：异步关闭浏览器
      • browser.pages()：异步返回打开的所有页面操作对象列表

      6、page

      • page.goto(url, [options])：异步进入url地址的页面
        • timeout：跳转等待时间，默认30秒，30秒内没有打开页面就判断跳转失败
        • waitUntil：满足什么条件认为页面跳转完成，默认load
          • load：页面加载时触发
          • domcontentloaded：页面加载完成触发
          • networkidle0：页面不再有网络连接时触发
          • networkidle2：只有两个网络连接时触发
        • referer：设置请求头的referer，用来欺骗服务器的防盗链拦截
      • page.goBack([options])：操控页面后退路由，参数同上
      • page.goForward[options]：操控页面前进路由，参数同上
      • page.close()：关闭当前页面
      • page.isClosed()：返回页面是否被关闭
      • page.cookies()：异步返回当前页面的cookie
      • page.screenshot(options)：对页面进行截图
        • path：截图本地保存路径
        • fullpage：是否截取整个网站(就是下拉才能看清全部的真个)，默认false
      • page.pdf(options)：对页面保存为pdf
        • path：pdf本地保存路径
        • format：保存格式 可选值 - [“A4”]
      • page.evaluate(fn, [...args])：异步获取 在浏览器的控制台注入代码，代码执行后的结果
        • fn：在控制台运行的函数
          • 就相当于在浏览器的控制台执行JS脚本语言
          • 获取的结果可以用return返回结果
          • 注意，这个函数已经完全进入到浏览器控制台的作用域
        • args：给fn传递的参数
      • page.addScriptTag(options)：异步 给网页注入JS代码
        • url：script标签的src属性值
        • path：注入的JS代码本地文件路径
        • content：以字符串的形式 注入的css代码内容
        • type：脚本引入类型 - [module]
      • page.addStyleTag(options)：异步 给网页注入css代码
        • url：link标签的href属性值
        • path：注入的css代码本地文件路径
        • content：以字符串的形式 注入的css代码
      • page.waitForSelector(selector, [options])：异步等待页面某个元素加载完成
        • selector：元素css选择器
        • options：
          • visible：等待元素在dom中可见
          • hidden：等待元素在页面中消失
          • timeout：等待时间
      • page.waitForRequest(url, [options])
        • url：等待的请求地址
        • options：
          • timeout：等待时间
      • page.setCacheEnabled(false)：设置请求缓存状态，默认启动缓存
      • page.select(selector)：异步获取页面元素
      • page.click(selector, [options])：异步点击页面元素
        • selector：元素css选择器
        • options：
          • button：鼠标按键，默认left，值可为-[left, right, middle]
          • clickCount：点击次数
          • delay：鼠标按下和弹起之间的间隔时间，单位毫秒，默认为0
      • page.hover(selector)：异步鼠标悬浮到某个元素
      • page.type(selector, text, [options])：异步在输入框输入内容
        • selector：元素css选择器
        • text：输入的内容
        • options：
          • dalay：每个字符输入的延迟，单位毫秒，默认0
      • page.focus(selector)：异步聚焦到某个元素
      • page.keyboard.type(text)：异步使用虚拟键盘模拟输入
      • page.keyboard.down(key)：异步使用虚拟键盘模拟key键按下
      • page.keyboard.press(key)：异步使用虚拟键盘模拟key键敲击
      • page.keyboard.up(key)：异步使用虚拟键盘模拟key键弹起
      • page.mouse.click(x, y, [options])：异步使用虚拟鼠标模拟点击
        • x：x轴位置
        • y：y轴位置
        • options:
          • button：鼠标按键 - [left, right, middle]
          • clickCount：点击次数
          • delay：鼠标按下和弹起时间间隔
      • page.mouse.down(options)：异步使用虚拟鼠标模拟按下，参数同上
      • page.mouse.up(options)：异步使用虚拟鼠标模拟弹起，参数同上
      • page.mouse.move(x, y, [options])：异步使用鼠标模拟移动
        • x：移动到x轴位置
        • y：移动到y轴位置
        • options:
          • steps：每次移动的步长：默认为1，就意味着鼠标光标从原来位置到(x, y)位置之间闪现过去了。
      • page.touchscreen(x, y)：异步模拟触摸

      7、绕过拦截

      • 隐身插件：puppeteer-extra、puppeteer-extra-plugin-stralth

      • 使用：

        import puppeteer from "puppeteer-extra";
import pluginStealth from "puppeteer-extra-plugin-stralth";
puppeteer.use(pluginStealth()); // 像express使用中间件那样
// ......

      8、警告

      本文档仅用于开发页面的爬虫测试，请不要使用本文档的内容做非法事情，谢谢。

      你可能感兴趣的:(前端学习,爬虫,javascript,node.js,网络安全)

      • 移动端城市区县二级联动选择功能实现包 good2know
        本文还有配套的精品资源，点击获取简介：本项目是一套为移动端设计的jQuery实现方案，用于简化用户在选择城市和区县时的流程。它包括所有必需文件：HTML、JavaScript、CSS及图片资源。通过动态更新下拉菜单选项，实现城市到区县的联动效果，支持数据异步加载。开发者可以轻松集成此功能到移动网站或应用，并可基于需求进行扩展和优化。1.jQuery移动端解决方案概述jQuery技术简介jQuery
      • 用代码生成艺术字：设计个性化海报的秘密
        本文围绕“用代码生成艺术字：设计个性化海报的秘密”展开，先概述代码生成艺术字在海报设计中的独特价值，接着介绍常用的代码工具（如HTML、CSS、JavaScript等），详细阐述从构思到实现的完整流程，包括字体样式设计、动态效果添加等，还分享了提升艺术字质感的技巧及实际案例。最后总结代码生成艺术字的优势，为设计师提供打造个性化海报的实用指南，助力提升海报设计的独特性与吸引力，符合搜索引擎SEO标准
      • Gerapy爬虫管理框架深度解析：企业级分布式爬虫管控平台 Python×CATIA工业智造 爬虫分布式pythonpycharm
        引言：爬虫工程化的必然选择随着企业数据采集需求指数级增长，传统单点爬虫管理模式面临三重困境：管理效率瓶颈：手动部署耗时占开发总时长的40%以上系统可靠性低：研究显示超过65%的爬虫故障源于部署或调度错误资源利用率差：平均爬虫服务器CPU利用率不足30%爬虫管理方案对比：┌───────────────┬─────────────┬───────────┬───────────┬──────────
      • 【数据分析】抓包工具的定义常见类型分类使用场景及注意事项
        抓包工具的定义常见类型分类使用场景及注意事项-CSDN直播抓包工具的定义常见类型分类使用场景及注意事项抓包工具的定义常见类型分类使用场景及注意事项抓包工具概述抓包工具顾名思义是一种用于捕获并分析网络数据包的软件或硬件工具它能够在数据传输过程中截取并记录网络流量让用户能够深入理解并排查网络问题这类工具的用途广泛从网络安全测试到应用程序调试都离不开抓包工具的帮助在众多的抓包工具中WiresharkFi
      • 为什么学习Web前端一定要掌握JavaScript？ web前端学习指南
        为什么学习Web前端一定要掌握JavaScript？在前端的世界里，没有什么是JavaScript实现不了的，关于JS有一句话：凡是可以用JavaScript来写的应用，最终都会用JavaScript，JavaScript可运行在所有主要平台的所有主流浏览器上，也可运行在每一个主流操作系统的服务器端上。现如今我们在为网站写任何一个主要功能的时候都需要有懂能够用JavaScript写前端的开发人员。
      • 《跨域资源共享CORS的深层逻辑与前端实践精要》
        不同源头的资源交互已成为常态，而跨域资源共享（CORS）正是支撑这种交互的隐形架构。现代Web安全体系中平衡开放与防护的精妙设计。理解CORS的深层逻辑，不仅能解决实际开发中的跨域难题，更能触及网络安全与资源流通的核心矛盾，为前端工程师构建稳健的应用提供底层认知支撑。跨域资源共享的诞生，源于网络安全与应用发展的必然冲突。浏览器的同源策略，作为早期网络安全的基石，通过限制不同源文档的交互，有效阻挡了
      • Vue CSR 到 Nuxt 3 SSR 迁移：技术实现与问题解决实录 二倍速播放 前端vue.js
        1.迁移动机与技术选型1.1CSR架构的局限性基于Vue3和Vite构建的客户端渲染(CSR)单页应用(SPA)提供了良好的开发体验和用户交互流畅性。但是其核心局限在于：搜索引擎优化(SEO)：初始HTML响应仅包含一个根div元素，实际内容由JavaScript在浏览器端动态生成。虽然主流搜索引擎（如Google）能够执行部分JavaScript，但其抓取效率和稳定性不如直接获取完整HTML。非
      • 12. 什么是事件委托 yqcoder 前端面试-CSScss面试
        总结事件委托（EventDelegation）是JavaScript中一种重要的事件处理机制，它利用了事件冒泡的特性，将事件的处理程序绑定到父元素或祖先元素上，而不是直接绑定到具体的子元素上。什么是事件委托？事件冒泡：在DOM中，事件通常会从触发元素开始，然后逐级向上冒泡到其父元素、祖先元素，直到window对象。核心思想：事件委托的核心思想是利用事件冒泡机制，在父元素上监听事件，而不是在每个子元
      • 中国顶级黑客名单 2501_92914741 facebooktwitterpaddle微信开放平台
        网名：KING真实名字：谭绪武OICQ：1576172简介：原中国黑客联盟站长，2001年中]=美黑客大战领军人物之一，中国第1代黑客之一，中国最早期黑客组织中国黑客联盟的创始人，中国黑客界泰斗级元老，中国传奇黑客。网名：sunx真实姓名：孙华OICQ：239670简介：资深网络安全专家、软件设计师、Unix专家,在黑客、病毒等技术上均具有顶尖级水平，对系统内核研究有很高的造诣，程序反编译、跟踪、
      • Centos7防火墙 会飞的灰大狼 Centos7linux
        Centos7防火墙前言：本来想在系统那里去说防火墙但防火墙要说的要很多使用单独做一章文章去讲防火墙~~‍在CentOS7中，防火墙是保障系统网络安全的核心组件，默认采用firewalld作为防火墙管理工具（替代了CentOS6的iptables服务），底层仍基于iptables内核模块实现规则控制。‍iptablesiptables命令的完整格式较为复杂，其核心结构由命令选项、表（table）、
      • 关于前端的性能优化
        性能优化主要涵盖了以下四个方面：(tip:仅代表个人总结，如有不当，还希望看到的大佬多多指示)减少网络请求：合并文件、使用CDN、启用缓存。优化资源加载：代码分割、懒加载、图片压缩。提升渲染性能：减少重绘回流、防抖节流、使用WebWorker。监控和迭代：定期使用工具检测性能，持续优化。一、网络层面优化减少HTTP请求合并文件：将多个CSS或JavaScript文件合并成一个，减少请求次数。使用C
      • 时间组件库Day.js那些事 前端小白花 javascript开发语言ecmascript
        一、简介1.什么是Day.jsDay.js是一个轻量级，易于使用的JavaScript日期库，提供了强大的日期和时间处理功能，与Moment.js的API设计相似，但具有更高的性能和更小的体积。Day.js官网https://day.js.org/docs/zh-CN/installation/installation2.优势a.特点轻量级：Dayjs的压缩后大小只有2KB左右，远小于Moment
      • JavaScript正则表达式去除括号但保留内容与去除括号与内容 Selicens javascript正则表达式
        项目上碰到一个需求，是取多个递增文件的文件名，类似于test(1).txt、test(2).txt，但是不需要括号，只要test1、test2这种格式，最开始想到的办法就是js里的replace替换，先上一个比较笨但是也能实现效果的例子letname="test(1).txt"letdata=name.split('.')[0].replace('(','').replace(')','')con
      • 网络安全架构与网络拓扑的深度解析 火箭统 网络安全攻击面减少网络架构网络拓扑数据包转发
        背景简介网络安全是当前信息时代的核心挑战之一，随着网络技术的快速发展，攻击手段也日益多样化。本篇博客文章基于提供的书籍章节内容，深入分析网络安全中的攻击面减少策略、网络架构的设计与管理，以及不同网络拓扑的特点，旨在为读者提供一个全面的网络安全知识框架。攻击面减少攻击面是指一个系统或软件暴露给潜在攻击者的全部潜在入口点。减少攻击面是提高网络安全的有效手段之一。通过减少运行的代码量、限制未受信任用户的
      • 网络安全第14集 不灭锦鲤 web安全安全
        前言：小迪安全14集，这集重点内容：0、什么是js渗透测试？在javascript中也存在变量和函数，存在可控变量和函数就有可能存在在漏洞，js开发的web应用和php、java开发的区别是，js能看得到的源代码，php看不到，但是风险就是未授权访问、配置信息泄露（加密算法、key秘钥等），源代码看得到，存在更多的url泄露，从而可能会出现未授权访问，从url，前提：web应用可以采用前端语言或后
      • 25年不倒的“犀牛书“：为什么《JavaScript权威指南第7版》仍是程序员的案头圣经？ 阿蒙Armon javascript开发语言ecmascript
        25年不倒的"犀牛书"：为什么《JavaScript权威指南第7版》仍是程序员的案头圣经？当一本技术书能连续畅销25年，历经7次迭代仍稳坐领域第一梯队，它必然藏着超越时代的硬实力。《JavaScript权威指南（原书第7版）》就是这样一部传奇——豆瓣9.4分的封神之作，程序员口中的"犀牛书"，从网景时代到ES2020，它始终是JavaScript开发者的终极参考书。如果你还在为原型链、闭包、异步编
      • 与网络安全相比，为什么只会Python很难找到工作？ 程序员羊羊 网安工程师网络安全黑客web安全python安全数据库网络开发语言学习
        前言作为一门广泛应用的编程语言，Python在众多领域中都有着不可忽视的地位。然而，对于那些寻求就业的程序员来说，仅仅掌握Python可能并不足以让他们轻松地找到一份理想的工作。本文将深入探讨为什么只会Python很难找到工作，以及分析在职程序员在Python岗位上可能会遇到的一些情况。一、Python的优势与局限性Python的优势Python作为一种高级编程语言，具有简洁、易读、易于学习等特点
      • 网络安全三要素 岁月静好2025 安全
        网络安全三要素1.保密性信息的保密性（Confidentiality）是网络安全的核心概念之一，它指的是确保信息只能被授权的用户访问，防止数据泄露给未授权的个人、系统或过程2。1.1保密性的核心含义限制访问：只有经过授权的用户才能查看或使用敏感信息。防止泄露：避免信息在传输、存储或处理过程中被窃取或监听。保护隐私：确保个人、企业或国家的隐私数据不被非法获取。1.3实现保密性的常见技术技术手段作用说
      • 什么是JSON，如何与Java对象转化 doublez234 javajsonspringspringboot
        JSON概念JSON(JavaScriptObjectNotation)是一种轻量级的数据交换格式。它易于人阅读和编写，同时也易于机器解析和生成。JSON基于JavaScript（ECMAScript（欧洲计算机协会制定的js规范））编程语言的一个子集，但它是一种独立于语言的数据格式，被广泛应用于各种编程语言和平台之间的数据交换。JSON的主要特点：轻量级：JSON格式非常简洁，只包含必要的数据信
      • APP开发入门：了解主流的编程语言 agi大模型 Python职业与职场程序员开发语言数据分析编程语言
        前言在过去的几年里，有许多程序员开始学习和使用编程语言。这其中包括C、C++、Java和Python。尽管有许多语言可供选择，但大多数程序员都会选择最容易学习的编程语言。如今，有很多编程语言供选择。程序员们在学习这些语言时可以自由地选择他们喜欢的方式，因为他们的目标是构建任何软件，而不仅仅是创建一个应用程序。你可以在Linux上学习C/C++、Java、Python、C#或JavaScript，你
      • 运维-资产梳理
        资产梳理一、明确目标与范围1.1、确定梳理目的网络安全：缩小攻击面、识别风险点。资源配置：优化资源利用率、降低成本。合规要求：满足法律法规或行业标准（如等保、ISO27001）。1.2、界定资产范围物理资产：服务器、网络设备、终端设备、IoT设备等。数字资产：操作系统、数据库、应用程序、域名、IP地址、云资源、容器/K8s集群、SaaS应用。数据资产：敏感数据（如客户信息、财务数据）、业务数据、备
      • Python爬虫【五十八章】Python数据清洗与分析全攻略：从Pandas到深度学习的异常检测进阶 程序员_CLUB Python入门到进阶python爬虫pandas
        目录背景与需求分析第一章：结构化数据清洗实战（Pandas核心技法）1.1数据去重策略矩阵1.2智能缺失值处理体系第二章：深度学习异常检测进阶2.1自动编码器异常检测（时序数据）2.2图神经网络异常检测（关系型数据）第三章：综合案例实战案例1：金融交易反欺诈系统案例2：工业传感器异常检测第四章：性能优化与工程实践4.1大数据处理加速技巧4.2模型部署方案第五章：方法论总结与展望5.1方法论框架5.
      • Python【一】Python全方位知识指南 程序员_CLUB python开发语言
        目录背景：为什么Python成为开发者必备技能？‌‌一、Python是什么？‌‌二、Python能做什么？六大核心应用场景‌‌1.自动化办公‌‌2.网络爬虫‌‌3.数据分析‌‌三、零基础入门Python：环境搭建与学习路径‌‌1.环境搭建（Windows/Mac详细步骤）‌2‌.基础语法速成（7天掌握）‌四、实战项目推荐（*****）‌‌五、学习建议与避坑指南（新手常见错误）‌六、总结：**背景：
      • Python爬虫【三十五章】爬虫高阶：基于Docker集群的动态页面自动化采集系统实战 程序员_CLUB Python入门到进阶python爬虫docker
        目录一、技术演进与行业痛点二、核心技术栈深度解析2.1动态渲染三件套2.2Docker集群架构设计2.3自动化调度系统三、进阶实战案例3.1电商价格监控系统1.技术指标对比2.实现细节3.2新闻聚合平台1.WebSocket监控2.字体反爬破解四、性能优化与运维方案4.1资源消耗对比测试4.2集群运维体系五、总结与未来展望六、Python爬虫相关文章（推荐）一、技术演进与行业痛点在Web3.0时代
      • Python爬虫【三十二章】爬虫高阶：动态页面处理与Scrapy+Selenium+BeautifulSoup分布式架构深度解析实战
        目录引言一、动态页面爬取的技术背景1.1动态页面的核心特征1.2传统爬虫的局限性二、技术选型与架构设计2.1核心组件分析2.2架构设计思路1.分层处理2.数据流三、代码实现与关键技术3.1Selenium与Scrapy的中间件集成3.2BeautifulSoup与ScrapyItem的整合3.3分布式爬取实现3.3.1Scrapy-Redis部署3.3.2多节点启动四、优化与扩展4.1性能优化策略
      • Python爬虫【三十三章】爬虫高阶：动态页面破解与验证码OCR识别全流程实战 程序员_CLUB Python入门到进阶python爬虫ocr
        目录一、技术背景与行业痛点二、核心技术与实现路径2.1动态页面处理方案对比2.2Selenium深度集成实践2.3OCR验证码破解方案1.预处理阶段：2.识别阶段：3.后处理阶段三、典型应用场景解析3.1电商价格监控系统1.技术架构2.实现效果3.2社交媒体舆情分析1.特殊挑战2.优化方案：四、合规性与风险控制五、总结Python爬虫相关文章（推荐）一、技术背景与行业痛点在Web3.0时代，网站反
      • Python爬虫【三十四章】爬虫高阶：动态页面处理与Playwright增强控制深度解析 程序员_CLUB Python入门到进阶python爬虫开发语言
        目录一、技术演进背景与行业挑战二、核心技术栈深度解析2.1动态渲染双引擎架构2.2浏览器指纹伪装方案2.3BeautifulSoup集成实践三、进阶应用场景突破3.1电商价格监控系统3.1.1技术架构创新3.1.2实现效果3.2社交媒体舆情分析3.2.1无限滚动模拟3.2.2WebSocket监控3.2.3Canvas指纹防护四、性能优化与合规方案4.1资源消耗对比测试4.2反爬对抗升级方案五、总
      • Python爬虫【三十一章】爬虫高阶：动态页面处理与Scrapy+Selenium+Celery弹性伸缩架构实战
        目录引言一、动态页面爬取的技术挑战1.1动态页面的核心特性1.2传统爬虫的局限性二、Scrapy+Selenium：动态爬虫的核心架构2.1技术选型依据2.2架构设计2.3代码实现示例三、Celery：分布式任务队列的引入3.1为什么需要Celery？3.2Celery架构设计3.3代码实现示例3.4Scrapy与Celery的集成四、优化与扩展4.1性能优化4.2分布式部署4.3反爬对抗五、总结
      • 探秘CommonJS：Node.js模块化核心解析
        CommonJS是JavaScript的模块化规范，主要应用于服务器端环境（尤其是Node.js），其核心目标是解决代码组织、依赖管理和作用域隔离问题。以下是其核心要点：一、核心特性同步加载模块通过require()同步加载并执行，后续代码需等待模块加载完成后执行，适用于I/O快速的服务器环境（如本地文件读取）。作用域隔离每个文件视为独立模块，模块内定义的变量、函数默认私有（不污染全局作用域），仅
      • 壹脉销客AI电子名片源码核心架构
        为什么选择源码部署AI电子名片？在数字化转型浪潮中，越来越多的企业意识到拥有自主可控的电子名片系统的重要性。源码部署相比SaaS服务具有三大核心优势：数据完全自主-客户信息存储在企业自有服务器深度定制自由-可根据业务需求二次开发长期成本优化-一次部署永久使用壹脉销客AI电子名片源码核心架构壹脉销客提供的企业级电子名片解决方案采用前后端分离架构：前端技术栈（小程序端）javascript//小程序a
      • apache ftpserver-CentOS config gengzg apache
        <server xmlns="http://mina.apache.org/ftpserver/spring/v1" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation=" http://mina.apache.o
      • 优化MySQL数据库性能的八种方法 AILIKES sqlmysql
        1、选取最适用的字段属性 　　MySQL可以很好的支持大数据量的存取，但是一般说来，数据库中的表越小，在它上面执行的查询也就会越快。因此，在创建表的时候，为了获得更好的 性能，我们可以将表中字段的宽度设得尽可能小。例如，在定义邮政编码这个字段时，如果将其设置为CHAR(255),显然给数据库增加了不必要的空间，甚至使用VARCHAR这种类型也是多余的，因为CHAR(6)就可以很
      • JeeSite 企业信息化快速开发平台 Kai_Ge JeeSite
        JeeSite 企业信息化快速开发平台 平台简介 JeeSite是基于多个优秀的开源项目，高度整合封装而成的高效，高性能，强安全性的开源Java EE快速开发平台。 JeeSite本身是以Spring Framework为核心容器，Spring MVC为模型视图控制器，MyBatis为数据访问层， Apache Shiro为权限授权层，Ehcahe对常用数据进行缓存，Activit为工作流
      • 通过Spring Mail Api发送邮件 120153216 邮件main
        原文地址：http://www.open-open.com/lib/view/open1346857871615.html 使用Java Mail API来发送邮件也很容易实现，但是最近公司一个同事封装的邮件API实在让我无法接受，于是便打算改用Spring Mail API来发送邮件，顺便记录下这篇文章。 【Spring Mail API】 Spring Mail API都在org.spri
      • Pysvn 程序员使用指南 2002wmj SVN
        源文件:http://ju.outofmemory.cn/entry/35762 这是一篇关于pysvn模块的指南. 完整和详细的API请参考 http://pysvn.tigris.org/docs/pysvn_prog_ref.html. pysvn是操作Subversion版本控制的Python接口模块. 这个API接口可以管理一个工作副本, 查询档案库, 和同步两个. 该
      • 在SQLSERVER中查找被阻塞和正在被阻塞的SQL 357029540 SQL Server
        SELECT  R.session_id AS BlockedSessionID ,          S.session_id AS BlockingSessionID ,          Q1.text AS Block
      • Intent 常用的用法备忘 7454103 .netandroidGoogleBlogF#
        Intent     应该算是Android中特有的东西。你可以在Intent中指定程序 要执行的动作（比如：view,edit,dial），以及程序执行到该动作时所需要的资料 。都指定好后，只要调用startActivity()，Android系统 会自动寻找最符合你指定要求的应用 程序，并执行该程序。 下面列出几种Intent 的用法 显示网页:
      • Spring定时器时间配置 adminjun spring时间配置定时器
        红圈中的值由6个数字组成，中间用空格分隔。第一个数字表示定时任务执行时间的秒，第二个数字表示分钟，第三个数字表示小时，后面三个数字表示日，月，年，< xmlnamespace prefix ="o" ns ="urn:schemas-microsoft-com:office:office" /> 测试的时候，由于是每天定时执行，所以后面三个数
      • POJ 2421 Constructing Roads 最小生成树 aijuans 最小生成树
        来源：http://poj.org/problem?id=2421 题意：还是给你n个点，然后求最小生成树。特殊之处在于有一些点之间已经连上了边。 思路：对于已经有边的点，特殊标记一下，加边的时候把这些边的权值赋值为0即可。这样就可以既保证这些边一定存在，又保证了所求的结果正确。 代码： #include <iostream> #include <cstdio>
      • 重构笔记——提取方法（Extract Method） ayaoxinchao java重构提炼函数局部变量提取方法
        提取方法（Extract Method）是最常用的重构手法之一。当看到一个方法过长或者方法很难让人理解其意图的时候，这时候就可以用提取方法这种重构手法。   下面是我学习这个重构手法的笔记：   提取方法看起来好像仅仅是将被提取方法中的一段代码，放到目标方法中。其实，当方法足够复杂的时候，提取方法也会变得复杂。当然，如果提取方法这种重构手法无法进行时，就可能需要选择其他
      • 为UILabel添加点击事件 bewithme UILabel
            默认情况下UILabel是不支持点击事件的，网上查了查居然没有一个是完整的答案，现在我提供一个完整的代码。   UILabel *l = [[UILabel alloc] initWithFrame:CGRectMake(60, 0, listV.frame.size.width - 60, listV.frame.size.height)]
      • NoSQL数据库之Redis数据库管理(PHP-REDIS实例) bijian1013 redis数据库NoSQL
        一.redis.php <?php //实例化 $redis = new Redis(); //连接服务器 $redis->connect("localhost"); //授权 $redis->auth("lamplijie"); //相关操
      • SecureCRT使用备注 bingyingao secureCRT每页行数
        SecureCRT日志和卷屏行数设置 一、使用securecrt时，设置自动日志记录功能。 1、在C:\Program Files\SecureCRT\下新建一个文件夹(也就是你的CRT可执行文件的路径），命名为Logs； 2、点击Options -> Global Options -> Default Session -> Edite Default Sett
      • 【Scala九】Scala核心三：泛型 bit1129 scala
        泛型类 package spark.examples.scala.generics class GenericClass[K, V](val k: K, val v: V) { def print() { println(k + "," + v) } } object GenericClass { def main(args: Arr
      • 素数与音乐 bookjovi 素数数学haskell
            由于一直在看haskell，不可避免的接触到了很多数学知识，其中数论最多，如素数，斐波那契数列等，很多在学生时代无法理解的数学现在似乎也能领悟到那么一点。     闲暇之余，从图书馆找了<<The music of primes>>和<<世界数学通史>>读了几遍。其中素数的音乐这本书与软件界熟知的&l
      • Java-Collections Framework学习与总结-IdentityHashMap BrokenDreams Collections
                这篇总结一下java.util.IdentityHashMap。从类名上可以猜到，这个类本质应该还是一个散列表，只是前面有Identity修饰，是一种特殊的HashMap。         简单的说，IdentityHashMap和HashM
      • 读《研磨设计模式》-代码笔记-享元模式-Flyweight bylijinnan java设计模式
        声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/ import java.util.ArrayList; import java.util.Collection; import java.util.HashMap; import java.util.List; import java
      • PS人像润饰&调色教程集锦 cherishLC PS
          1、仿制图章沿轮廓润饰——柔化图像，凸显轮廓 http://www.howzhi.com/course/retouching/   新建一个透明图层，使用仿制图章不断Alt+鼠标左键选点，设置透明度为21%，大小为修饰区域的1/3左右（比如胳膊宽度的1/3），再沿纹理方向（比如胳膊方向）进行修饰。   所有修饰完成后，对该润饰图层添加噪声，噪声大小应该和
      • 更新多个字段的UPDATE语句 crabdave update
        更新多个字段的UPDATE语句                    update tableA a set (a.v1, a.v2, a.v3, a.v4) = --使用括号确定更新的字段范围
      • hive实例讲解实现in和not in子句 daizj hivenot inin
        本文转自：http://www.cnblogs.com/ggjucheng/archive/2013/01/03/2842855.html 当前hive不支持 in或not in 中包含查询子句的语法，所以只能通过left join实现。 假设有一个登陆表login(当天登陆记录,只有一个uid),和一个用户注册表regusers(当天注册用户，字段只有一个uid)，这两个表都包含
      • 一道24点的10+种非人类解法（2,3,10,10） dsjt 算法
        这是人类算24点的方法？！！！ 事件缘由：今天晚上突然看到一条24点状态，当时惊为天人，这NM叫人啊？以下是那条状态 朱明西 : 24点，算2 3 10 10，我LX炮狗等面对四张牌痛不欲生，结果跑跑同学扫了一眼说，算出来了，2的10次方减10的3次方。。我草这是人类的算24点啊。。 然后么。。。我就在深夜很得瑟的问室友求室友算 刚出完题，文哥的暴走之旅开始了 5秒后
      • 关于YII的菜单插件 CMenu和面包末breadcrumbs路径管理插件的一些使用问题 dcj3sjt126com yiiframework
        在使用 YIi的路径管理工具时，发现了一个问题。                    <?php         
      • 对象与关系之间的矛盾：“阻抗失配”效应[转] come_for_dream 对象
        概述   “阻抗失配”这一词组通常用来描述面向对象应用向传统的关系数据库（RDBMS）存放数据时所遇到的数据表述不一致问题。C++程序员已经被这个问题困扰了好多年，而现在的Java程序员和其它面向对象开发人员也对这个问题深感头痛。   “阻抗失配”产生的原因是因为对象模型与关系模型之间缺乏固有的亲合力。“阻抗失配”所带来的问题包括：类的层次关系必须绑定为关系模式（将对象
      • 学习编程那点事 gcq511120594 编程互联网
        一年前的夏天，我还在纠结要不要改行，要不要去学php？能学到真本事吗？改行能成功吗？太多的问题，我终于不顾一切，下定决心，辞去了工作，来到传说中的帝都。老师给的乘车方式还算有效，很顺利的就到了学校，赶巧了，正好学校搬到了新校区。先安顿了下来，过了个轻松的周末，第一次到帝都，逛逛吧！ 接下来的周一，是我噩梦的开始，学习内容对我这个零基础的人来说，除了勉强完成老师布置的作业外，我已经没有时间和精力去
      • Reverse Linked List II hcx2013 list
        Reverse a linked list from position m to n. Do it in-place and in one-pass. For example:Given 1->2->3->4->5->NULL, m = 2 and n = 4, return 
      • Spring4.1新特性——页面自动化测试框架Spring MVC Test HtmlUnit简介 jinnianshilongnian spring 4.1
        目录 Spring4.1新特性——综述 Spring4.1新特性——Spring核心部分及其他 Spring4.1新特性——Spring缓存框架增强 Spring4.1新特性——异步调用和事件机制的异常处理 Spring4.1新特性——数据库集成测试脚本初始化 Spring4.1新特性——Spring MVC增强 Spring4.1新特性——页面自动化测试框架Spring MVC T
      • Hadoop集群工具distcp liyonghui160com
            1. 环境描述 两个集群：rock 和 stone rock无kerberos权限认证，stone有要求认证。 1. 从rock复制到stone，采用hdfs Hadoop distcp -i hdfs://rock-nn:8020/user/cxz/input hdfs://stone-nn:8020/user/cxz/运行在rock端，即源端问题：报版本
      • 一个备份MySQL数据库的简单Shell脚本 pda158 mysql脚本
        　　主脚本（用于备份mysql数据库）： 　　该Shell脚本可以自动备份 数据库。只要复制粘贴本脚本到文本编辑器中，输入数据库用户名、密码以及数据库名即可。我备份数据库使用的是mysqlump 命令。后面会对每行脚本命令进行说明。 　　 1. 分别建立目录“backup”和“oldbackup” 　　#mkdir /backup 　　#mkdir /oldbackup 　
      • 300个涵盖IT各方面的免费资源（中）——设计与编码篇 shoothao IT资源图标库图片库色彩板字体
        A. 免费的设计资源 Freebbble:来自于Dribbble的免费的高质量作品。 Dribbble:Dribbble上“免费”的搜索结果——这是巨大的宝藏。 Graphic Burger:每个像素点都做得很细的绝佳的设计资源。 Pixel Buddha:免费和优质资源的专业社区。 Premium Pixels:为那些有创意的人提供免费的素材。
      • thrift总结 - 跨语言服务开发 uule thrift
        官网 官网JAVA例子 thrift入门介绍 IBM-Apache Thrift - 可伸缩的跨语言服务开发框架 Thrift入门及Java实例演示 thrift的使用介绍   RPC    POM： <dependency> <groupId>org.apache.thrift</groupId>