天天water
天天water

高质量解读《高性能mysql》——第3章服务器性能剖析

前言：

高效读书，一张逻辑图带你读懂、读薄书中重点。

深入学习MySQL系列，解读的目的是为了把书读薄，抽出重点进行梳理、理解、运用。因大量文字很容易让人觉得枯燥无味，为此博主花费一定精力和时间整理输出为逻辑思维图，以便大家学习和参考。

--------------------------------------------------------------------------------------
注：下面文字只是对逻辑思维图的”翻译“，节省时间，只看图即可。 

目录

服务器性能剖析思维逻辑图 

性能优化简介

最常碰到的三个性能相关的服务端问题是

两个原则

通过性能剖析进行优化

理解性能剖析

对应用程序进行性能剖析

应用性能瓶颈可能的影响因素

一个不错的工具：New Relic

测量PHP应用程序

剖析MySQL查询

剖析服务器负载

剖析单条查询

使用性能剖析

诊断间歇性问题

一些间歇性数据库性能问题的实际案例

单条查询问题还是服务器问题

捕获诊断数据

一个诊断案例

其他剖析工具

总结

基本知识点

服务器性能剖析思维逻辑图 

高质量解读《高性能mysql》——第3章服务器性能剖析_第1张图片 服务器性能剖析思维逻辑图

 

性能优化简介

最常碰到的三个性能相关的服务端问题是

  • 如何确认服务器是否达到了性能最佳的状态
  • 找出某条语句为什么执行不够快
  • 诊断被用户描述成“停顿”、“堆积”或者“卡死”的某些间歇性疑难故障

两个原则

  • 性能定义为完成某件任务所需要的时间度量，换句话说，性能即响应时间。我们通过任务和时间，而不是资源来测量性能
  • 无法测量就无法有效地优化

通过性能剖析进行优化

性能剖析是测量和分析时间花费在哪里的主要方法

性能剖析一般两个步骤

  • 测量任务所花费的时间
  • 对结果进行统计和排序，将重要的任务排到前面

两种查询类型的性能剖析

  • 基于执行时间的分析。基于执行时间的分析研究的是什么任务执行时间最长
  • 基于等待分析。基于等待的分析是判断任务在什么地方被阻塞的时间最长

理解性能剖析

性能剖析输出可能缺失的点

值得优化的查询

性能剖析不会自动给出哪些查询值得花时间去优化

一些只占总响应时间比重很小的查询是不值得优化的

如果优化的成本大于收益，就应当停止优化

异常情况

某些任务即使没有出现在性能剖析输出的前面也需要优化

未知的未知

性能剖析工具可能会显示“丢失的时间”。丢失的时间指的是任务的总时间和实际测量到的时间之间的差

被掩藏的细节

性能剖析无法显示所有响应时间的分布。只相信平均值，可能会遗漏重要信息

思考如何在更高层次的堆栈中进行交互式的分析

对应用程序进行性能剖析

应用性能瓶颈可能的影响因素

外都资源，比如调用外部的Web服务或者搜索引擎

应用处理大量的数据

在循环中执行复杂的操作

使用了低效的算法

一个不错的工具：New Relic

测量PHP应用程序

工具1，xhprof

工具2，Ifp（instrumentation-for-php）

剖析MySQL查询

剖析服务器负载

服务器端的剖析价值

在服务器端可以有效地审计效率低下的查询

提升应用的性能，同时也能解决某些特定的难题

降低服务器的整体压力和负载，可以推迟或者避免系统升级更昂贵硬件的需求

发现和定位用户糟糕的用户体验，比如某些极端情况

捕获MySQL的查询到日志文件中

慢查询日志单位

MySQL5.0及之前，单位是秒

MySQL5.1及之后，可以捕获所有的查询，单位是微秒

慢查询意义

慢查询日志是开销最低、精度最高的测试查询时间的工具

慢查询日志是一种轻量而且功能全面的性能剖析工具，是优化服务器查询的利器

无法在服务器上记录查询的解决办法

第一种是通过--processlist选项不断查看SHOW FULL PROCESSLIST的输出，记录查询第一次出现的时间和消失的时间

第二种技术是通过抓取TCP网络包，然后根据MySQL的客户端/服务端通信协议进行解析。（可以先通过tcpdump将网络包数据保存到磁盘，然后使用pt-query-digest的--type=tcpdump选项来解析并分析查询）

分析查询日志

不要直接打开整个慢查询日志进行分析

应该先生成一个剖析报告

再查看日志中需要特别关注的部分

从慢查询日志中生成剖析报告的工具：pt-query-digest

pt-query-digest

所有语句汇总报告

单条查询记录报告详情

剖析单条查询

使用SHOW PROFILE

版本MySQL5.1以后引入，SET profiling=1；

使用SHOW STATUS

explain是通过估计得到的结果，而计数器则是实际的测量结果。explain无法确定临时表是否是磁盘表

使用慢查询日志

使用Performance Schema

在MySQL5.5中新增

使用性能剖析

诊断间歇性问题

尽量不要使用试错的方式来解决问题

一些间歇性数据库性能问题的实际案例

  • 应用通过curl从一个运行很慢的外部服务来获取相关数据
  • redis缓存中的一些重要条目过期，导致大量请求落到MySQL以重新生成缓存条目
  • DNS查询偶尔会有超时现象
  • 可能是由于互斥锁争用，或者内部删除查询缓存的算法效率太低的缘故，MySQL的查询缓存有时候会导致服务有短暂的停顿
  • 当并发度超过某个阈值时，InnoDB的扩展性限制导致查询计划的优化需要很长的时间

总结：问题的原因可能是数据库的原因，也可能是相关组件或者应用程序的原因

单条查询问题还是服务器问题

使用SHOW GLOBAL STATUS

线程连接没有变化、但是执行查询线程明显上升，同时每秒的查询数相比正常情况明显下降的可能原因

可能服务器内部碰到某种瓶颈，导致新查询在开始执行前因为需要获取老查询正在等待的锁而造成堆积

可能服务区突然遭遇了大量的查询请求，缓存redis失效

使用SHOW PROCESSLIST

使用查询日志

理解发现的问题（Making sense of the findings）

可视化的数据最具说服力

捕获诊断数据

搞清楚两件事

  • 一个可靠且实时的“触发器”，也就是能区分什么时候问题出现的方法
  • 一个收集诊断数据的工具

诊断触发器

两个可能导致无法达到预期的问题：误报或者漏检

尝试使用pt-stalk，可以配置重要的监控的变量、阈值、检查的频率等

需要收集什么样的数据

在需要的时间段内收集的数据尽可能全；系统的状态、CPU利用率、磁盘使用率和可用空间、ps的输出采样、内存利用率，以及可以从MySQL获得的信息，如SHOW STATUS、SHOW PROCESSLIST和SHOW INNODB STATUS等

执行时间包括用于工作的时间和等待的时间

对于等待分析，常用的方法是GDB的堆栈跟踪

解释结果数据

两个目的

  • 检查问题是否真的发生了
  • 是否有非常明显的跳跃性变化

堆栈需要自下而上来看

一个诊断案例

其他剖析工具

  • 使用USER_STATISTICS表
  • 使用strace

总结

基本知识点

  • 我们认为定义性能最有效的方法是响应时间
  • 如果无法测量就无法有效地优化，所以性能优化工作需要基于高流量、全方位及完整的响应时间测量
  • 测量的最佳开始点是应用程序，而不是数据库
  • 大多数系统无法完整地测量，测量有时候也会有错误的结果
  • 完整的测量会产生大量需要分析的数据，所以需要用到剖析器
  • 剖析报告是一种汇总信息，掩盖和丢弃了太多的细节
  • 有两种消耗时间的操作：工作或者等待
  • 优化和提升是两回事。当继续提升的成本超过收益的时候，应当停止优化
  • 注意你的直觉，但应该只根据直觉来指导解决问题的思路，而不是用于确定系统的问题。决策应当尽量基于数据而不是感觉

以上内容均为博主原创手码梳理。码字不易，但只要能提高，都是值得的。如果您觉得，这篇文章对您的基础知识学习、巩固、提高有帮助，欢迎点赞、分享、收藏，谢谢。 --天天water 

你可能感兴趣的:(高质量解读《高性能mysql》)

  • 人不能两次踏进同一条河流 就是源
    这是古希腊学家赫拉克利特的名言，在我原先看来就是万事万物都在不断的变化，强调事物的运动性。可后来了解到他还有个徒弟更深的进行了解读，人哪怕一次也不能踏进同一条河流，因为当你踏进的时候，已经不是你最初想的那天河流了。这确实也说明了事物无时无刻不在运动，可感觉毫无意义，如果一切都这样去算，那么每一秒甚至每一个更加微小的时间上都会有一个不同的结论，这根本无法指明生活的方向和解决困顿，只会让人更加困顿。这
  • 用好考评指挥棒 答好时代新答卷 天才码字选手
    民之所望，施政所向。而群众评议正是检验发展质量和人民获得感的试金石。究竟是“走过场”、“栽盆景”，还是俯下身子，甘当为民服务的“孺子牛”或撸起袖子，做担当作为的“拓荒牛”，群众自是看得清清楚楚，最有发言权。因而也有这样一句话：干部脚下沾多少泥土，群众心里就有多少感情。民意不可或缺，群众的意见不能少。新时代下，要最大程度发挥群众评议在激励干部担当作为中的效能，才能汇聚起推动高质量发展的磅礴之力，答好
  • 全面解读设备状态监测 xiatianxy 设备状态监测设备状态监测
    长期以来，基于巡检和定期维护维修保养的方式，对电机\泵类\风机等旋转类设备的故障维修，大多都是在设备问题出现之后的事后维护或者定期的预防性维护，前者无法减少或避免设备故障的发生，后者则存在维修不足或维修过剩等问题。另外，日常维护工作严重依赖于人的责任心和经验，一旦出现人员更替，设备的运营管理压力加大，并且现场丰富的维护保养经验也很难传承到新人手中。维护利器——设备状态监测设备状态监测，即对运行中的
  • 《倾“庙”之恋》里的诗意 道之可道
    这是毕飞宇老师《小说课》的最后一课。同前些课一样，他的每节课带给我的全新的解读视角都令我目眩神迷。汪曾祺老师的《受戒》正是我前段时间读过的，读后只觉得很有意思，两个单纯的可爱的少男少女之间的感情非常令人心动，而那个小和尚的身份又让这个故事有些传奇色彩，然而清新又是主调，还有一种淡淡的悲悯，为着他们未来未知的可能是悲剧的命运。毕老师的解读简直让我瞠目结舌，原来这个小说里藏着那么多唯美的诗意，那么多生
  • 《家庭教育促进法》解读（14）落到实处方是真 愿我们顺利平安
    点击上方蓝字，关注我们吧！坚持写作第七十七天今天继续为大家解读和普及我国首部家庭类法律——《家庭教育促进法》的第四章“社会协同”。这一章是上一章“国家支持”的落脚点。第三十八条居民委员会、村民委员会可以依托城乡社区公共服务设施，设立社区家长学校等家庭教育指导服务站点，配合家庭教育指导机构组织面向居民、村民的家庭教育知识宣传，为未成年人的父母或者其他监护人提供家庭教育指导服务。个人认为这一点非常必要
  • 面试必考题：Android Binder 机制详解 大模型大数据攻城狮 androidbinder面试reactnativekotlindalvikretrofit
    目录第一章：Binder的基本概念什么是Binder？多角度解读Binder第二章：Binder的工作机制Binder的整体流程服务注册：从零到有的第一步服务查询：找到目标的“地图”服务调用：请求与响应的旅程Binder驱动的幕后功劳为什么Binder这么快？第三章：Binder在系统架构中的角色Activity：界面背后的通信枢纽Binder的角色实例分析Service：后台任务的跨进程支柱Bi
  • 程序员必备：10 个提升代码质量的工具 大力出奇迹985 宠物
    在软件开发过程中，代码质量对项目的成功起着决定性作用。高质量的代码不仅易于维护和扩展，还能有效降低成本并提升可靠性。本文精心挑选了10个程序员必备工具，助力提升代码质量。这些工具涵盖代码格式化、静态分析、代码审查、测试、性能优化、安全扫描、版本控制、依赖管理、代码生成以及文档生成等多个关键领域。通过使用它们，开发者能够高效地发现并解决代码中的潜在问题，遵循最佳实践，提升代码的可读性、可维护性与安全
  • GitLab 18.2 发布几十项与 DevSecOps 有关的功能，可升级体验【二】 极小狐 gitlab极狐gitlabdevsecopsdevopsci/cd
    沿袭我们的月度发布传统，极狐GitLab发布了18.2版本，该版本带来了议题和任务的自定义工作流状态、新的合并请求主页、新的群组概览合规仪表盘、下载安全报告的PDF导出文件、中心化的安全策略管理（Beta）等几十个重点功能的改进。下面是对部分重点功能的详细解读。关于极狐GitLab的安装升级，可以查看官方指导文档。18.2.0容器镜像registry.gitlab.cn/omnibus/gitla
  • “解读《文化自信和民族复兴》”（75）“七个家庭幸福的着力点"之“自以为是和高己卑人” 周安柱
    家庭幸福要突破的一个重要元素：“近则卑”。按道理，越来越熟悉，带着爱的眼光会看到对方身上更多的闪光点才对，但如果不小心活出了小我的状态，却很容易“故意找茬”，结果出现“近之则不逊而远之则怨”的错误模式！两个太熟悉的人在一起，如果要攻击对方的“不是”，那太容易了。如果不注意分寸，肆无忌惮的“互相伤害揭伤疤”，那就好比两个紧紧的长期抱在一起的刺猬，彼此都会伤痕累累。其实，自己做得事、说的话以及自己的认
  • 提示工程架构师揭秘：AI让提示更“懂业务”的底层逻辑（超干货） AI智能架构工坊 人工智能ai
    好的，各位技术同仁，今天我们来聊一个非常前沿且极具实战价值的话题——提示工程架构师。这个新兴角色正迅速成为连接AI能力与业务价值的关键桥梁。特别是在如何让AI的“提示”更“懂业务”这一点上，其背后蕴含着深刻的底层逻辑和系统方法。本文将倾尽“超干货”，为你揭开这层神秘面纱，从理论到实践，全方位解读提示工程架构师的核心素养、方法论、工具链以及未来演进。标题：提示工程架构师揭秘：AI让提示更“懂业务”的
  • OpenCloudOS 城市行·成都站圆满落幕，共探操作系统技术新未来！ CSDN资讯 业界资讯资讯数据库人工智能
    7月26日，由OpenCloudOS社区主办，海光信息战略合作的OpenCloudOS城市行・成都站活动在成都欧洲中心圆满举办，线上观看人次超3万。当前，数字化浪潮席卷全球各行各业，在国产化进程加速的背景下，操作系统的技术突破与生态构建不仅是保障信息安全的关键，更是推动产业升级、实现高质量发展的必由之路。然而，国产操作系统在性能优化、安全防护、多场景适配等方面仍面临诸多挑战，亟需产业链上下游协同创
  • Android CameraX 使用指南：简化相机开发 安卓开发者 AndroidJetpack数码相机android
    前言在Android开发中，相机功能一直是比较复杂的部分，需要处理不同设备的兼容性、生命周期管理以及复杂的API调用。Google推出的CameraX库极大地简化了这一过程，让开发者能够更轻松地实现高质量的相机功能。本文将带你全面了解CameraX的使用方法。什么是CameraX？CameraX是Jetpack系列中的一个库，它基于Camera2API构建，但提供了更高层次的抽象，具有以下优点：简
  • 分布式IO选型指南：2025年分布式无线远程IO品牌及采集控制方案详解 2501_91398178 分布式分布式IO模块远程IO模块
    近年来，随着工业物联网（IIoT）、智能制造和工业4.0的深入发展，分布式无线远程IO模块在工业控制领域的应用愈发广泛。这种模块通过无线方式实现远程数据采集与控制，极大地提高了工业设施的灵活性和效率。2025年，分布式IO市场呈现出技术革新与品牌竞争加剧的态势。本文基于权威数据平台（如Statista、MarketsandMarkets、GrandViewResearch）的市场分析，全面解读分布
  • 分布式IO详解：2025年分布式无线远程IO采集控制方案选型指南 2501_91398178 分布式分布式IO
    随着工业物联网（IIoT）和智能制造的快速发展，分布式远程IO（输入/输出）采集控制技术作为工业自动化系统的重要组成部分，正逐步取代传统集中式控制架构。这种技术广泛应用于工厂自动化、能源管理、智慧城市、过程控制等领域。2025年，分布式无线远程IO系统凭借其灵活性、低功耗和高可靠性，成为工业控制领域的核心解决方案。本文基于权威数据平台分析，详细解读分布式无线远程IO技术，盘点全球领先厂商及其产品优
  • 探索RabbitMQ，让消息传递变得简单易懂！ 黎杉娜Torrent
    探索RabbitMQ，让消息传递变得简单易懂！当你寻找一个强大而可靠的分布式消息队列系统时，RabbitMQ无疑是最佳选择之一。这个开源项目已经赢得了全球无数开发者的喜爱，现在，更有一份详尽的【RabbitMQ中文】文档在等待你的探索！项目介绍RabbitMQ中文是一份专门为非英语国家的开发者准备的高质量翻译资源，它将原汁原味的RabbitMQ官方文档转化为中文，旨在帮助中国地区的开发者更好地理解
  • 不会PS也不会建模，却想把敦煌鸣沙山塞进小方块里！ 自律的音律
    掐指一算，好像很久没出特殊玩法的教程了~刚好前几天有小伙伴提问：有没有立体图表可以参考一下？由此延伸到以前发的一篇文章，里面整合了一些高质量的立体图表：我知道，PPT自带的图表你已经看腻了，是时候养养眼啦！那么问题来了，文章中的这种效果，要是只会PPT能不能做？经过@隔壁家老廖的提醒，通过关键词microworld找到了一些参考图：仔细想了想，似乎也没有很难，主要是用到了裸眼3D效果，结合切面光影
  • 中国企业出海短信服务合规建议与指南 貘云信息MOY Mobile 行业动态人工智能大数据网络国际短信出海服务
    在全球化进程加速的今天，越来越多中国企业将产品与服务出口到海外，无论是独立站电商、APP工具还是SaaS平台，短信服务作为连接企业与用户的重要通信手段，承担着身份验证、交易通知、营销召回等关键任务。然而，由于各国在电信监管、隐私保护和反骚扰政策上的差异，出海企业若不了解全球短信合规要求，往往会面临“短信发不出”“收不到”“线路被封”等严重问题。本文将从合规角度与技术实践出发，为中国出海企业全面解读
  • Hive与Hudi集成：增量大数据处理方案 AI大数据智能洞察 大数据与AI人工智能大数据AI应用hivehadoop数据仓库ai
    Hive与Hudi集成：增量大数据处理方案关键词：Hive、Hudi、增量大数据处理、数据集成、数据湖摘要：本文主要探讨了Hive与Hudi集成的增量大数据处理方案。我们将深入了解Hive和Hudi的核心概念，剖析它们之间的关系，详细阐述集成的算法原理与操作步骤，通过实际项目案例展示如何进行开发环境搭建、代码实现与解读。同时，会介绍该集成方案的实际应用场景、相关工具和资源，探讨未来发展趋势与挑战。
  • DevOps CI/CD流水线配置实战：GitHub Actions与Jenkins详细教程 火烧屁屁lo devopsci/cdgithub
    现代软件开发中，持续集成与持续交付（CI/CD）是DevOps核心实践。通过自动化构建、测试和部署流程，团队能够快速交付高质量软件。本文将深入探讨两种主流工具（GitHubActions和Jenkins）的配置方法，并提供完整代码示例。GitHubActions配置指南GitHubActions是GitHub原生的CI/CD工具，直接集成在代码仓库中。以下为典型工作流配置：创建基础工作流文件在项目
  • 道德经 若齐
    第十七章悠兮贵言，功成事遂太上，下知有之。其次，亲而誉之。其次，畏之。其次，侮之。信不足焉，有不信焉。悠兮其贵言，功成事遂，百姓皆谓：我自然。译文最高明的统治者，人民只知道他的存在。次一等的统治者，人民尊重称赞他。再次一等的，人民畏惧他。更次一等的，人民轻视他。统治者的诚信不足，人民自然不信服他。统治者悠闲自在，不随意发号施令，等到事情办成功了，百姓都会说：“我们本来就是这样的。”解读心得1．本章
  • 建设忠诚干净担当的高素质专业化干部队伍 d28724bb7dfc
    认真学习贯彻学习二十大的精神和自治区党委十届六次全会精神。坚持把学习贯穿工作始终，常态化开展学习，切实增强思想自觉、政治自觉和行动自觉，全面提升司法行政队伍的能力和作风，努力打造党和人民信得过、靠得住、能放心得政法铁军，为我县高质量发展提供坚强法治保障。一是着重强化理论学习，深入学习习近平新时代中国特色社会主义思想、习近平法治思想，抓紧抓实党的二十大精神和自治区党委十届六次全会神的学习任务，补精神
  • 【Linux指南】Linux粘滞位详解：解决共享目录文件删除安全隐患
    引言在Linux多用户环境中，共享目录的权限管理始终是系统安全的重要课题。当多个用户需要在同一目录下协作时，常常会面临一个棘手的问题：如何让用户既能自由访问共享文件，又能防止他人恶意删除不属于自己的文件？这一矛盾在早期Linux系统中尤为突出，而"粘滞位（StickyBit）"的引入，正是为了破解这一困局。本文将从共享目录的权限困境出发，深入剖析粘滞位的工作原理、设置方法与实际应用场景。通过解读粘
  • 影刀RPA_批量添加用户至企业微信_源码解读 RPA+AI十二工作室 影刀python开发语言影刀rpa企业微信自动化
    一、项目简介本项目是一个基于影刀RPA（RoboticProcessAutomation）开发的自动化工具，主要功能是通过手机号码批量添加用户至企业微信。项目利用企业微信客户端自动化操作，实现了从手机号导入、去重处理到批量发送好友请求的全流程自动化。项目特点：支持通过数据表格或Excel导入手机号自动去重和格式清洗企业微信窗口自动化控制操作结果分类统计与导出二、项目结构xbot_robot/├──
  • 三年级教材解读+阅读策略单元 （一） 小许灵儿
    主讲人：韩素静讲座时间:2022年10月10日一、三年级教材解读及教学建议从三年级开始每个单元前多了一页，它有三个专业名称：导语页、篇章页、单元页。图画：与人文主题相关。上面文字：人文主题。下边文字：语文要素（阅读+表达）三年级语文教材双线结构：（一）语文要素1、语文要素旋螺上升，是有关联的例举：三（上）第一单元：关注有新鲜感的词语和句子。第七单元：感受课文生动的语文，积累喜欢的语句。（递进关系，
  • 大模型【进阶】（四）QWen模型架构的解读 ReinaXue 人工智能transformer语言模型迁移学习AudioLM语音识别神经网络
    一、Qwen大模型的背景Qwen（通义千问）是阿里巴巴云开发的大型语言模型（LLM）和多模态模型系列，旨在提供强大的自然语言理解、文本生成、图像理解、音频处理及工具使用能力。Qwen系列包括Qwen、Qwen1.5、Qwen2、Qwen2.5和Qwen3等版本，涵盖了从小型（0.5B参数）到超大型（480B参数）的模型规模，支持多语言（119种语言）和多模态任务（文本、图像、音频、视频）。本文将重
  • 宝妈兼职平台，有个活兼职从哪下载？ 配音新手圈
    当然，如果您是一位忙碌的宝妈，正寻找既能兼顾家庭又能灵活赚取收入的兼职机会，那么选择一个可靠且便捷的宝妈兼职平台无疑是明智之举。配音新手圈是鼎音传媒公司开发的在线兼职公众号,职位包括:写手、程序开发、剪辑、设计、翻译、配音、无门槛、插画、每日更新。关于“有个活兼职”这样的平台，虽然具体名称可能因地区或平台而异，但我可以提供一个通用性强、有说服力的指导，帮助您找到并下载适合宝妈的高质量兼职APP或访
  • 清平乐•春归何处》文本解读 林清华揭阳惠来小学
    春归何处?寂寞无行路。若有人知春去处，唤取归来同住。春无踪迹谁知?除非问取黄鹂。百啭无人能解,因风飞过蔷薇。词人因春天的逝去而感到寂寞,脚步无处可觅，内心无处安放。他在苦苦寻找春天归去的踪迹,希望如果有人知道春天的去处，唤她回来,他要和春天在一起。词人的奇想,让我们读见一个不一样的春天。春天,她是词人走散的亲人,她是词人远行的好友。试问.谁能把归去的春天唤回来呢?词的下阕以“春无踪迹”开篇,表明了
  • 以“精耕细作”之良方 助力高质量干部教育培训 picka
    近日，中共中央政治局召开会议，审议《干部教育培训工作条例》、《全国干部教育培训规划（2023－2027年）》。会议指出，干部教育培训是建设高素质干部队伍的先导性、基础性、战略性工程，在推进中国特色社会主义伟大事业和党的建设新的伟大工程中具有不可替代的重要地位和作用。干部培训绝不是朝夕之功，切忌拔苗助长、操之过急，唯有扎实“根基”、墩好“新苗”、强壮“枝干”，做到“精耕细作”，才能为祖国厚植一棵棵顶
  • 计算机三级网络技术（一、二） lovewangyihui 笔记网络工程师计算机等级考试网络网络协议
    第1章：网络系统结构与设计的基本原则1、计算机网络的分类网络的覆盖范围：局域网、城域网、广域网、个人区域网局域网局域网覆盖有限的地理范围，它适应于机关、校园、工厂等有限范围内的计算机、终端与各类信息处理设备连网的需求。局域网提供高数据传输效率（10Mbps~10Gbps）、底误码率的高质量数据传输环境。局域网一般属于一个单位所有**，易于建立、维护与扩展**。介质控制访问方法：共享式介质、交换式介
  • 揭秘智能产品定价AI平台的优势，AI应用架构师为你详解 SuperAGI架构师的AI实验室 人工智能大数据ai
    智能定价新范式：AI平台如何重塑产品定价策略——AI应用架构师深度剖析副标题：从算法原理到商业价值，全方位解读智能定价AI平台的架构优势与落地实践摘要/引言在数字化经济时代，产品定价已从传统的经验驱动转向数据驱动的精密科学。传统定价方法依赖人工分析、历史数据和直觉判断，面临三大核心痛点：响应滞后（无法实时捕捉市场波动）、精度有限（难以量化复杂变量间的非线性关系）、规模瓶颈（无法针对海量SKU或细分
  • 解读Servlet原理篇二---GenericServlet与HttpServlet 周凡杨 javaHttpServlet源理GenericService源码
    在上一篇《解读Servlet原理篇一》中提到，要实现javax.servlet.Servlet接口（即写自己的Servlet应用），你可以写一个继承自javax.servlet.GenericServletr的generic Servlet ，也可以写一个继承自java.servlet.http.HttpServlet的HTTP Servlet（这就是为什么我们自定义的Servlet通常是exte
  • MySQL性能优化 bijian1013 数据库mysql
            性能优化是通过某些有效的方法来提高MySQL的运行速度，减少占用的磁盘空间。性能优化包含很多方面，例如优化查询速度，优化更新速度和优化MySQL服务器等。本文介绍方法的主要有：         a.优化查询         b.优化数据库结构  
  • ThreadPool定时重试 dai_lm javaThreadPoolthreadtimertimertask
    项目需要当某事件触发时，执行http请求任务，失败时需要有重试机制，并根据失败次数的增加，重试间隔也相应增加，任务可能并发。 由于是耗时任务，首先考虑的就是用线程来实现，并且为了节约资源，因而选择线程池。 为了解决不定间隔的重试，选择Timer和TimerTask来完成 package threadpool; public class ThreadPoolTest {
  • Oracle 查看数据库的连接情况 周凡杨 sqloracle 连接
    首先要说的是，不同版本数据库提供的系统表会有不同，你可以根据数据字典查看该版本数据库所提供的表。 select * from dict where table_name like '%SESSION%'; 就可以查出一些表，然后根据这些表就可以获得会话信息 select sid,serial#,status,username,schemaname,osuser,terminal,ma
  • 类的继承 朱辉辉33 java
    类的继承可以提高代码的重用行，减少冗余代码；还能提高代码的扩展性。Java继承的关键字是extends 格式:public class 类名（子类）extends 类名（父类）{ } 子类可以继承到父类所有的属性和普通方法，但不能继承构造方法。且子类可以直接使用父类的public和 protected属性，但要使用private属性仍需通过调用。 子类的方法可以重写，但必须和父类的返回值类
  • android 悬浮窗特效 肆无忌惮_ android
    最近在开发项目的时候需要做一个悬浮层的动画，类似于支付宝掉钱动画。但是区别在于，需求是浮出一个窗口，之后边缩放边位移至屏幕右下角标签处。效果图如下：   一开始考虑用自定义View来做。后来发现开线程让其移动很卡，ListView+动画也没法精确定位到目标点。   后来想利用Dialog的dismiss动画来完成。   自定义一个Dialog后，在styl
  • hadoop伪分布式搭建 林鹤霄 hadoop
    要修改4个文件    1: vim hadoop-env.sh  第九行    2: vim core-site.xml            <configuration>     &n
  • gdb调试命令 aigo gdb
    原文：http://blog.csdn.net/hanchaoman/article/details/5517362   一、GDB常用命令简介   r run 运行.程序还没有运行前使用 c             cuntinue 
  • Socket编程的HelloWorld实例 alleni123 socket
    public class Client { public static void main(String[] args) { Client c=new Client(); c.receiveMessage(); } public void receiveMessage(){ Socket s=null; BufferedRea
  • 线程同步和异步 百合不是茶 线程同步异步
    多线程和同步 : 如进程、线程同步，可理解为进程或线程A和B一块配合，A执行到一定程度时要依靠B的某个结果，于是停下来，示意B运行；B依言执行，再将结果给A；A再继续操作。 所谓同步，就是在发出一个功能调用时，在没有得到结果之前，该调用就不返回，同时其它线程也不能调用这个方法   多线程和异步:多线程可以做不同的事情,涉及到线程通知     &
  • JSP中文乱码分析 bijian1013 javajsp中文乱码
            在JSP的开发过程中，经常出现中文乱码的问题。         首先了解一下Java中文问题的由来：         Java的内核和class文件是基于unicode的，这使Java程序具有良好的跨平台性，但也带来了一些中文乱码问题的麻烦。原因主要有两方面，
  • js实现页面跳转重定向的几种方式 bijian1013 JavaScript重定向
            js实现页面跳转重定向有如下几种方式： 一.window.location.href <script language="javascript"type="text/javascript"> window.location.href="http://www.baidu.c
  • 【Struts2三】Struts2 Action转发类型 bit1129 struts2
     在【Struts2一】 Struts Hello World http://bit1129.iteye.com/blog/2109365中配置了一个简单的Action，配置如下   <!DOCTYPE struts PUBLIC "-//Apache Software Foundation//DTD Struts Configurat
  • 【HBase十一】Java API操作HBase bit1129 hbase
    Admin类的主要方法注释：   1. 创建表 /** * Creates a new table. Synchronous operation. * * @param desc table descriptor for table * @throws IllegalArgumentException if the table name is res
  • nginx gzip ronin47 nginx gzip
    Nginx GZip 压缩 Nginx GZip 模块文档详见：http://wiki.nginx.org/HttpGzipModule 常用配置片段如下： gzip on; gzip_comp_level 2; # 压缩比例，比例越大，压缩时间越长。默认是1 gzip_types text/css text/javascript; # 哪些文件可以被压缩 gzip_disable &q
  • java-7.微软亚院之编程判断俩个链表是否相交 给出俩个单向链表的头指针，比如 h1 ， h2 ，判断这俩个链表是否相交 bylijinnan java
    public class LinkListTest { /** * we deal with two main missions: * * A. * 1.we create two joined-List(both have no loop) * 2.whether list1 and list2 join * 3.print the join
  • Spring源码学习-JdbcTemplate batchUpdate批量操作 bylijinnan javaspring
    Spring JdbcTemplate的batch操作最后还是利用了JDBC提供的方法，Spring只是做了一下改造和封装 JDBC的batch操作： String sql = "INSERT INTO CUSTOMER " + "(CUST_ID, NAME, AGE) VALUES (?, ?, ?)";
  • [JWFD开源工作流]大规模拓扑矩阵存储结构最新进展 comsci 工作流
        生成和创建类已经完成,构造一个100万个元素的矩阵模型,存储空间只有11M大,请大家参考我在博客园上面的文档"构造下一代工作流存储结构的尝试",更加相信的设计和代码将陆续推出.........     竞争对手的能力也很强.......,我相信..你们一定能够先于我们推出大规模拓扑扫描和分析系统的....
  • base64编码和url编码 cuityang base64url
    import java.io.BufferedReader; import java.io.IOException; import java.io.InputStreamReader; import java.io.PrintWriter; import java.io.StringWriter; import java.io.UnsupportedEncodingException;
  • web应用集群Session保持 dalan_123 session
    关于使用 memcached 或redis 存储 session ，以及使用 terracotta 服务器共享。建议使用 redis，不仅仅因为它可以将缓存的内容持久化，还因为它支持的单个对象比较大，而且数据类型丰富，不只是缓存 session，还可以做其他用途，一举几得啊。1、使用 filter 方法存储这种方法比较推荐，因为它的服务器使用范围比较多，不仅限于tomcat ，而且实现的原理比较简
  • Yii 框架里数据库操作详解-[增加、查询、更新、删除的方法 'AR模式'] dcj3sjt126com 数据库
        public function getMinLimit () {        $sql = "...";        $result = yii::app()->db->createCo
  • solr StatsComponent（聚合统计） eksliang solr聚合查询solr stats
    StatsComponent 转载请出自出处：http://eksliang.iteye.com/blog/2169134 http://eksliang.iteye.com/ 一、概述        Solr可以利用StatsComponent 实现数据库的聚合统计查询，也就是min、max、avg、count、sum的功能   二、参数
  • 百度一道面试题 greemranqq 位运算百度面试寻找奇数算法bitmap 算法
    那天看朋友提了一个百度面试的题目：怎么找出{1,1,2,3,3,4,4,4,5,5,5,5}  找出出现次数为奇数的数字.   我这里复制的是原话，当然顺序是不一定的，很多拿到题目第一反应就是用map,当然可以解决，但是效率不高。   还有人觉得应该用算法xxx,我是没想到用啥算法好...！   还有觉得应该先排序...   还有觉
  • Spring之在开发中使用SpringJDBC ihuning spring
      在实际开发中使用SpringJDBC有两种方式：   1. 在Dao中添加属性JdbcTemplate并用Spring注入；     JdbcTemplate类被设计成为线程安全的，所以可以在IOC 容器中声明它的单个实例，并将这个实例注入到所有的 DAO 实例中。JdbcTemplate也利用了Java 1.5 的特定(自动装箱，泛型，可变长度
  • JSON API 1.0 核心开发者自述 | 你所不知道的那些技术细节 justjavac json
    2013年5月，Yehuda Katz 完成了JSON API(英文，中文) 技术规范的初稿。事情就发生在 RailsConf 之后，在那次会议上他和 Steve Klabnik 就 JSON 雏形的技术细节相聊甚欢。在沟通单一 Rails 服务器库—— ActiveModel::Serializers 和单一 JavaScript 客户端库——&
  • 网站项目建设流程概述 macroli 工作
    一.概念 网站项目管理就是根据特定的规范、在预算范围内、按时完成的网站开发任务。 二.需求分析 项目立项 　　我们接到客户的业务咨询，经过双方不断的接洽和了解，并通过基本的可行性讨论够，初步达成制作协议，这时就需要将项目立项。较好的做法是成立一个专门的项目小组，小组成员包括：项目经理，网页设计，程序员，测试员，编辑/文档等必须人员。项目实行项目经理制。 客户的需求说明书 　　第一步是需
  • AngularJs 三目运算 表达式判断 qiaolevip 每天进步一点点学习永无止境众观千象AngularJS
    事件回顾：由于需要修改同一个模板，里面包含2个不同的内容，第一个里面使用的时间差和第二个里面名称不一样，其他过滤器，内容都大同小异。希望杜绝If这样比较傻的来判断if-show or not，继续追究其源码。 var b = "{{", a = "}}"; this.startSymbol = function(a) {
  • Spark算子：统计RDD分区中的元素及数量 superlxw1234 sparkspark算子Spark RDD分区元素
    关键字：Spark算子、Spark RDD分区、Spark RDD分区元素数量     Spark RDD是被分区的，在生成RDD时候，一般可以指定分区的数量，如果不指定分区数量，当RDD从集合创建时候，则默认为该程序所分配到的资源的CPU核数，如果是从HDFS文件创建，默认为文件的Block数。   可以利用RDD的mapPartitionsWithInd
  • Spring 3.2.x将于2016年12月31日停止支持 wiselyman Spring 3
                  Spring 团队公布在2016年12月31日停止对Spring Framework 3.2.x（包含tomcat 6.x）的支持。在此之前spring团队将持续发布3.2.x的维护版本。          请大家及时准备及时升级到Spring
  • fis纯前端解决方案fis-pure zccst JavaScript
    作者：zccst FIS通过插件扩展可以完美的支持模块化的前端开发方案，我们通过FIS的二次封装能力，封装了一个功能完备的纯前端模块化方案pure。 1，fis-pure的安装 $ fis install -g fis-pure $ pure -v 0.1.4 2，下载demo到本地 git clone https://github.com/hefangshi/f
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他