百万行mysql数据库优化和10G大文件上传方案

百万行mysql数据库优化和10G大文件上传方案

最近这几天正在忙这个优化的方案，一直没时间耍，忙碌了一段时间终于还是拿下了这个项目？项目中不要每次都把程序上的问题，让mysql数据库来承担，它只是个mysql而已。

问题1：针对MySQL Community5.5+版本优化业务执行速度，提高整体系统效率

测试服务器硬件环境：Intel Core i5，8gb内存，7200rpm硬盘，Win7专业版

Table名称

读取频率

写入频率

最低连续读取速度

最低连续写入速度

预估数据量

C….

频繁

不频繁

30行/150ms

100行/s

百万行

D…

频繁

不频繁

30行/150ms

100行/s

百万行

De…..

频繁

不频繁

30行/150ms

10行/s

万行

St……

频繁

不频繁

30行/150ms

100行/s

百万行

S……

频繁

频繁

30行/150ms

100行/s

百万行

Pr...

很频繁

不频繁

1000行/s-5000行/s

100行/s

百万行/表

De…….

很频繁

频繁

1000行/s-5000行/s

1000行/s

百万行/表

De……

很频繁

频繁

1000行/s-5000行/s

1000行/s

百万行/表

 

 

 

 

 

 

 

 

 

 

 

 

 

 

看到这个想到的是拆分表，不外乎就是表的纵向拆分和横向拆分，我在项目中也遇到过类似的问题，当时也是使用mysql数据库当时大概列数有800多，mysql数据一张表的字段是不能有800多个，最开始测试的是用String 按照JSON的格式存入的数据库，结果发现处理时加入了循环，反而使系统性能变得很慢导出一个Excel也是很吃力的，最后采用分表大概分了9张，解决了问题，其实现在想想是不是使用对象的序列化，将序列化的对象存入数据库呢，使用在从数据库中取出来反序列化使用，当时分表后满足了需求就没再测试对象的序列化的方法了。但是这次给的需求不需要纵向拆表，是否需要横向拆表呢？测试一次先，每次的点子都是要测试的e。

百万行mysql数据库优化和10G大文件上传方案_第1张图片 

百万行mysql数据库优化和10G大文件上传方案_第2张图片

 

有些时候在mysql中还是要善用limit，

百万行mysql数据库优化和10G大文件上传方案_第3张图片 

除开主键其余没加索引，这样上了百万条的数据查询应该是不存在问题，话不多说优化SQL吧。

但是插入还是存在问题，是否需要分表呢？如果只是上百万还是可以不用分表的，如果分表就要处理好分页查询，删除和增加的操作，我还是喜欢使用Mysql数据的同步，使用两个mysql数据库，服务器ip分别为ip1和ip2，我们将ip1作为Master数据库，把ip2作为slave服务器，我们可以采用单项同步的方式，就是Master的数据是主数据，然后slave主动去Master哪儿同步数据回来，太晚了，明天测试通过就可以开始优化项目了。

在数据库中数据在100w多行时插入数据耗时2.822秒的时间，

百万行mysql数据库优化和10G大文件上传方案_第4张图片

问题2：大文件上传居然有这样的要求，

档案大小

Action

最大执行内存占用

内网最低传输速率(802.11g)

50mb

Upload

5mb

1mb/s

500mb

Upload

5mb

1mb/s

5gb

Upload

5mb

1mb/s

10gb

Upload

5mb

1mb/s

50mb

Download

5mb

1mb/s

500mb

Download

5mb

1mb/s

5gb

Download

5mb

1mb/s

10gb

Download

5mb

1mb/s

 

 

 

 

 

 

 

 

 

 

 

 

 

以前遇到过一个视频网站上传要求也是最大4G左右，这次居然要上传最大的有10G，

为提高大文件传输速率，将目标文件分成N块文件，对应启动N个线程通过TCP/IP协议来传 输，传输文件前先检查是否存在该文件的临时文件群，如果存在找出其断点位置进行续传，最后合并文 件。异步分割发送，用目前最主流的FLASH+AJAX技术。ActionScript和HTML5是支持SOCKET通讯的，呵呵。

实现流程:

1 客户端向服务端发送传递文件启动信号(发送文件名字)

2 服务器检查是否包含有该文件所对应的临时文件(eg, 传输file.txt,就检查是否存在temp[i]file.txt,(i为 第N块临时文件)),如果存在就发送所有临时文件的断点位置给客户端

3 客户端更具文件大小将文件分为N块(每块默认大小为500M，可通过参数进行配置)以加快传输速率， 然后根据服务器返回的断点位置(如果有)对每块文件进行移位，移动到断点位置进行续传，如果服务器 上没有临时文件夹，就进行普通的传送文件

4当所有线程工作完成，合并所有临时文件夹。

大文件上传的问题已经实现使用的是serverlight实现的。测试通过了大概是5-6M每秒。

 
 
 

你可能感兴趣的:(数据库优化,大文件上传)

  • 企业级网站源码：一键优化与全站静态生成 DIY飞跃计划
    本文还有配套的精品资源，点击获取简介：本文介绍了一个具有商业价值的企业级网站源码包，包含了完整的前后端设计和逻辑处理。源码具备后台一键优化功能，可通过简单操作提升网站性能，如数据库优化、资源压缩和缓存管理。源码支持生成全站静态页面，以提高加载速度和SEO表现。同时提供了详细的安装和使用文档，以及相关的调试和部署工具，使得开发者能够快速搭建和维护定制化的网站解决方案。1.企业级网站源码的商业价值与应
  • Java全栈面试实战：从JVM到AI的技术演进之路
    Java全栈面试实战：从JVM到AI的技术演进之路面试现场：大厂技术终面室面试官：谢飞机同学，今天我们将从底层原理到架构设计，全面考察你的Java技术栈掌握程度。请真实展示你的技术积累。谢飞机：（自信满满）面试官好！Java开发6年，从JVM调优到微服务架构，从数据库优化到AI集成，全栈技术无死角！第一轮：Java底层与性能优化面试官：请详细说明JVM内存区域划分，以及G1垃圾收集器的工作原理和适
  • 信创环境下JAVA大文件上传续传的实践？
    今天早上有网友加我微信，也是咨询这块的技术问题，最近不知道啥情况，加我的网友还是挻多的。实际上我的微信很早就在网上公开了，但是还是有很多网友说找不到。昨天晚上论坛里面有位网友发私信给我，聊了一下这个问题，这个网友是一个自由职业者，他也是刚开始学习这块，很多技术都不是很了解，平时也对技术比较感兴趣，他最近接了一个项目，也是有这个需求，需要传大文件，主要难点在于大文件和文件夹的下载。我先花了1个小时左
  • JAVA在国企应用中如何实现大文件上传？ 路过了忘了 java开发语言java大文件上传java大文件秒传java大文件上传下载java文件传输解决方案jsp大文件上传
    军工利刃出鞘：破解100G涉密文件传输难题初春的挑战2025年3月的北京仍带着料峭寒意，军工研究院的会议室里却气氛灼热。大屏幕上跳动着红色警示：“政府单位100G涉密文件传输需求——现有系统兼容性评估：0%”。作为项目总工，我盯着这个刺眼的数字，指尖无意识地摩挲着茶杯边缘。"传统方案最多支持20G文件传输。"技术总监老张推了推眼镜，"而且我们的JSP框架是十年前基于Struts2搭建的，要兼容现代
  • JAVA HTTP大文件分片断点续传 weixin_52041354 java大文件上传java大文件秒传java大文件上传下载java文件传输解决方案jsp大文件上传java断点续传jsp加密传输
    要求：开源，免费，技术支持技术：分片,分块,断点续传,加密传输,加密存储需求：大文件上传，批量上传，断点续传，文件夹上传，大文件下载，批量下载，断点下载，文件夹下载文件夹：上传下载需要支持层级结构，采用非压缩方式文件大小：100G前端：vue2,vue3,vue-cli,jquery,html,webuploader后端：java,JSP,springboot,struts服务器：linux,信创
  • MySQL数据库优化之SQL优化终极指南 AAEllisonPang Mysql数仓大数据数据库mysqlsql
    目录SQL性能分析基础1.1慢查询日志配置1.2EXPLAIN执行计划解读1.3实时性能诊断工具索引优化实战2.1最左前缀原则的陷阱2.2联合索引设计案例2.3索引失效的7种场景高效查询编写技巧3.1避免全表扫描的秘诀3.2Join优化黄金法则3.3分页查询深度优化高级优化策略4.1隐式类型转换灾难4.2子查询重构方案4.3大数据量更新技巧企业级监控方案5.1慢SQL自动化分析5.2SQL审核平台
  • Odoo性能优化
    Odoo性能优化是确保系统高效运行的关键，尤其在数据量大或业务复杂的场景下。以下是基于实际项目经验总结的具体方法和最佳实践，涵盖数据库、代码、视图、缓存等多个层面：️一、数据库优化索引策略合理创建索引：对频繁查询的字段（如日期、状态字段）添加index=True，但避免过度索引导致写操作变慢。定期清理冗余索引：通过self.env['ir.model.fields'].search([('inde
  • Python 进阶学习之全栈开发学习路线 Microi风闲 【胶水语言】Pythonpython学习开发语言
    文章目录前言一、Python全栈开发技术栈1.前端技术选型2.后端框架选择3.数据库访问二、开发环境配置1.工具链推荐2.VSCode终极配置3.项目依赖管理三、现代Python工程实践1.项目结构规范2.自动化测试策略3.CI/CD流水线四、部署策略大全1.传统服务器部署2.容器化部署3.无服务器部署五、性能优化技巧1.数据库优化2.异步处理3.静态资源优化结语前言Python作为当今最流行的编
  • [数据库优化] 10个MySQL/MariaDB索引优化技巧：大幅提升查询性能 Clownseven 数据库mysqlmariadb
    更多服务器知识，尽在hostol.com你的网站或应用程序是不是经常因为数据库查询缓慢而让用户等到“地老天荒”？CPU占用率不高，内存也足够，服务器看起来一点都不忙，但页面就是出奇地慢？如果你遇到了这种情况，那么恭喜你（也可能是不幸），你很可能遇到了数据库性能优化中最常见也最关键的一环——索引问题！很多开发者和初级DBA（数据库管理员）可能会觉得索引这东西“玄之又玄”，或者简单粗暴地给每个列都加上
  • 时序数据库：数据库领域的未来之星 数据库管理艺术 数据库专家之路大数据AI人工智能MCP&AgentSQL实战数据库时序数据库ai
    时序数据库：数据库领域的未来之星关键词：时序数据库、时间序列数据、物联网、大数据分析、数据库优化、TSDB、实时数据处理摘要：本文深入探讨了时序数据库(TimeSeriesDatabase,TSDB)这一新兴数据库技术。我们将从基本概念入手，分析时序数据库的核心原理和架构设计，详细讲解其特有的数据模型和存储机制。通过实际代码示例展示如何使用主流时序数据库处理时间序列数据，并探讨其在物联网、金融科技
  • Oracle EMCC 13.5 集群安装部署指南 Lucifer三思而后行 DBA实战系列oracle数据库
    大家好，这里是DBA学习之路，专注于提升数据库运维效率。目录前言第一阶段：OMR集群部署1.1OracleRAC环境准备1.2数据库版本验证1.3EMCC专用数据库优化第二阶段：ACFS集群文件系统构建2.1存储层配置配置multipath多路径配置UDEV设备绑定2.2ACFS文件系统创建使用ASMCA创建磁盘组创建ACFSVolume挂载点准备和文件系统创建第三阶段：OMS集群部署3.1环境准
  • Spring Boot项目中大文件上传的优化策略与实践 代码老y springboot后端java
    在现代的Web开发中，文件上传是一个常见的功能需求。然而，当涉及到大文件上传时，传统的文件上传方式往往会面临诸多挑战，如内存溢出、上传速度慢、网络不稳定导致上传失败等问题。SpringBoot作为当前流行的Java开发框架，提供了强大的功能支持，但如何在SpringBoot项目中高效地实现大文件上传，仍然是一个值得深入探讨的话题。本文将详细介绍大文件上传的常见问题、解决方案以及优化策略，帮助开发者
  • Spring Boot项目中大文件上传的高级实践与性能优化 代码老y springboot性能优化后端
    引言随着互联网应用的不断发展，用户对文件上传功能的要求越来越高，尤其是在处理大文件时。SpringBoot作为一个高效且灵活的开发框架，为实现大文件上传提供了强大的支持。然而，仅仅实现基本的大文件上传功能是不够的，还需要进一步优化性能，提升用户体验，并确保系统的稳定性。本文将深入探讨SpringBoot项目中大文件上传的高级实践和性能优化策略，帮助开发者打造高效、可靠的大文件上传系统。一、大文件上
  • 前端如何实现大文件上传 行云＆流水 Vue3前端typescript前端
    一、基础技术实现文件分片（切片上传）将大文件按固定大小（如2MB/片）切割为多个Blob分片，通过file.slice()实现。优势：避免单次请求超时，支持断点续传。并发控制与异步上传使用Promise.all控制并发，避免浏览器请求阻塞。关键点：上传失败需自动重试。代码实现切片上传importaxiosfrom"axios";import{onMounted}from"vue";function
  • MySQL 统计信息详解：从原理到实践 我科绝伦（Huanhuan Zhou） mysqlmysqlandroid数据库
    MySQL统计信息是数据库优化器生成查询执行计划的关键依据，记录了表和索引的基本特性，辅助优化器估算查询成本、选择最优执行路径。一、统计信息主要内容分为表级、索引级和列级三类。1.1表级统计信息描述表基本属性，如行数（TABLE_ROWS）、平均行长度（AVG_ROW_LENGTH）、数据大小（DATA_LENGTH）、索引大小（INDEX_LENGTH）、空闲空间（DATA_FREE）。获取方式
  • Java零基础之自定义异常类！ 菜鸟不学编程 Java从入门到放弃java开发语言
    你好，欢迎来到我的博客！我是【菜鸟不学编程】  我是一个正在奋斗中的职场码农，步入职场多年，正在从“小码农”慢慢成长为有深度、有思考的技术人。在这条不断进阶的路上，我决定记录下自己的学习与成长过程，也希望通过博客结识更多志同道合的朋友。    ️主要方向包括Java基础、Spring全家桶、数据库优化、项目实战等，也会分享一些踩坑经历与面试复盘，希望能为还在迷茫中的你提供一些参考。  我相信：写作
  • Amazon S3的分段上传，大文件上传，上传进度条，列出分段上传，中止分段上传，重启续传功能实现 你熬夜了吗？ 开发语言javaspringbootspring前端vuevue.js
    我们在上传大文件的时候往往需要采用分片的方式，Amazon虽然提供了这种方式，但是不能实现我们后端在（宕机/重启）之后导致的文件丢失，大文件上传到一半可能会丢失数据的问题。本文将利用本地线程池加数据库记录的方式，实现后端（宕机/重启）后恢复之前正在上传的文件，顺便利用SSE（ServerSendEvent）实现（宕机/重启）后进度条的还原。首先引入maven，我用的是下面这个，目前最新版本1.12
  • 电商API性能优化：策略体系与实施要点 Joe13265449558 性能优化电商返回值淘宝API接口京东
    电商API性能优化策略介绍在电商领域，API（应用程序编程接口）作为连接电商平台与外部系统、服务或应用的关键桥梁，其性能直接关系到用户体验、业务效率以及系统的整体稳定性。随着电商业务的快速发展，API接口面临着高并发、大数据量处理等挑战，因此，对电商API进行性能优化显得尤为重要。本文将从多个维度探讨电商API性能优化的策略。一、数据库优化策略数据库是电商API接口的核心组件之一，其性能直接影响A
  • nacos+nginx动态配置大文件上传限制
    前言今天还要跟大家分享的一个点就是微服务网关gateway用webflux响应式不用servlet后，引发的一个忽略点差点在演示的时候炸锅，也不多讲废话，说说现象，说说处理就了事。一、上传超过20MB的视频报错配置在nacos里，读取配置用的@value注解发布新配置，拦截不生效用了nginx就是这么个现象，其实大概也知道原因。二、初步分析原因首先这是小弟写的，我不想动。其次可以理解是培养试验小弟
  • Java 中的成员变量与成员方法 —— 一次讲清！ 菜鸟不学编程 Java从入门到放弃java开发语言
    你好，欢迎来到我的博客！我是【菜鸟不学编程】  我是一个正在奋斗中的职场码农，步入职场多年，正在从“小码农”慢慢成长为有深度、有思考的技术人。在这条不断进阶的路上，我决定记录下自己的学习与成长过程，也希望通过博客结识更多志同道合的朋友。    ️主要方向包括Java基础、Spring全家桶、数据库优化、项目实战等，也会分享一些踩坑经历与面试复盘，希望能为还在迷茫中的你提供一些参考。  我相信：写作
  • 包装类是废物？还是背后藏着的 Java 设计良心？
    你好，欢迎来到我的博客！我是【菜鸟不学编程】  我是一个正在奋斗中的职场码农，步入职场多年，正在从“小码农”慢慢成长为有深度、有思考的技术人。在这条不断进阶的路上，我决定记录下自己的学习与成长过程，也希望通过博客结识更多志同道合的朋友。    ️主要方向包括Java基础、Spring全家桶、数据库优化、项目实战等，也会分享一些踩坑经历与面试复盘，希望能为还在迷茫中的你提供一些参考。  我相信：写作
  • 你还在用单线程处理请求？这年头还不会写多线程服务器，真的不慌吗？ 菜鸟不学编程 Java从入门到放弃java开发语言
    你好，欢迎来到我的博客！我是【菜鸟不学编程】  我是一个正在奋斗中的职场码农，步入职场多年，正在从“小码农”慢慢成长为有深度、有思考的技术人。在这条不断进阶的路上，我决定记录下自己的学习与成长过程，也希望通过博客结识更多志同道合的朋友。    ️主要方向包括Java基础、Spring全家桶、数据库优化、项目实战等，也会分享一些踩坑经历与面试复盘，希望能为还在迷茫中的你提供一些参考。  我相信：写作
  • 超全数据库优化与调优实战指南，从基础到进阶 半夜鬼刀门 数据库面试mysqlsql
    一、引言在数据库应用开发与运维过程中，SQL语句的性能表现直接关乎系统的响应速度、资源利用率以及整体稳定性。随着业务数据量的增长和复杂查询场景的增多，对SQL进行优化与调优变得愈发关键。本文将围绕SQL优化这一主题，从慢SQL治理、执行计划分析、架构优化、代码层面优化、索引优化等多个维度展开详细阐述，结合实际案例与工具使用，为大家呈现一套完整的SQL优化实践体系。二、慢SQL治理（一）慢SQL基础
  • 大文件上传类设计（OC实现） 瓜子三百克 iOS开发iosoracleobjective-c
    下面我将设计一个支持断点续传、多线程上传的大文件上传类，采用Objective-C实现，考虑线程安全、数据库持久化和高效上传。设计概览类文件划分FileUploadManager.h/m-上传任务管理中心FileUploadTask.h/m-单个上传任务控制ChunkUploadOperation.h/m-分块上传操作UploadDatabaseManager.h/m-数据库操作FileChunk
  • 前端大文件上传解决方案 诸葛亮的芭蕉扇 前端javascriptvue.js
    本文分享的内容是前端大文件上传的解决方案，文件上传是前端开发中常见的需求，特别是在处理视频、大型文档或数据集时。对于小文件上传不做详细介绍，在源码中已附带。大文件上传前置条件设置分片大小的值，即规定每个切片的大小设置文件大小阈值，即超过多少M判定为大文件大文件上传步骤计算文件md5的值前端对文件进行分割，每个切片中包含索引、切片内容、文件名称对切片集合进行遍历，按照顺序上传切片先校验切片是否已上传
  • 【力扣数据库知识手册】数据库优化 soso（找工作版 数据库八股数据库
    系统的吞吐量瓶颈往往出现在数据库的访问速度上，因为数据是放在磁盘上的，读写速度无法和内存相比。数据库结构优化在数据库设计中，需要考虑数据冗余，查询和更新的速度、字段的数据类型是否合理等多方面的内容。将字段很多的表分解成多个表。如果有些字段的使用频率很低，可以将这些字段分离出来。增加中间表。对于经常要联合查询的表，通过建立中间表以提高查询效率，具体地，将需要通过联合查询的数据插入到中间表中，然后将原
  • MySQL 数据操纵与数据库优化 熬夜的猪 数据库sqlmysql
    MySQL数据库的DML一、创建（Create）1.基本语法INSERTINTO表名[(列名1,列名2,...)]VALUES(值1,值2,...);省略列名条件：当值的顺序与表结构完全一致时，可省略列名（需包含所有字段值）批量插入：单条语句插入多行数据提升效率INSERTINTOstudent(id,name,score)VALUES(1,'张三',99),(2,'李四',88),(3,'王五'
  • 基于SpringBoot文件管理系统中的分片上传实现
    分片上传一、引言现代Web应用中，大文件上传是一个常见需求。传统单文件上传方式在网络不稳定或文件过大时存在诸多问题。分片上传技术通过将大文件分割为小块进行传输，完美解决了大文件上传的痛点。本文将深入探讨分片上传的核心实现方案。二、功能概述分片上传功能用于处理大文件上传，支持断点续传、MD5校验秒传和并发上传，核心特点包括：断点续传：通过记录已上传分片，支持中断后继续上传秒传功能：基于文件MD5值实
  • HTTP常见状态码汇总 Ailerx 计算机网络http网络协议网络
    HTTP常见状态码汇总HTTP状态码是服务器对客户端请求的响应结果，用三位数字表示，分为五类。了解常见状态码，有助于快速定位问题和优化体验。1xx：信息响应100Continue说明客户端可以继续发送请求的剩余部分。常见于大文件上传，告诉客户端服务器已准备好。2xx：成功200OK请求成功，服务器返回请求的数据。最常见的成功状态码。201Created资源创建成功，比如POST请求新建数据后返回。
  • 软件测试进阶：Python 高级特性与数据库优化（第二阶段 Day6） study软测 数据库pythonsql
    在掌握SQL复杂查询和Python数据库基础操作后，第六天将深入探索Python高级编程特性与数据库性能优化。通过掌握Python的模块与包管理、装饰器等高级语法，结合数据库索引优化、慢查询分析等技术，提升测试工具开发与数据处理效率。一、Python高级编程：模块、包与装饰器1.模块与包的使用模块导入：将代码拆分到不同.py文件中，通过import实现复用#自定义模块my_module.pydef
  • 安装数据库首次应用 Array_06 javaoraclesql
    可是为什么再一次失败之后就变成直接跳过那个要求 enter full pathname of java.exe的界面 这个java.exe是你的Oracle 11g安装目录中例如：【F:\app\chen\product\11.2.0\dbhome_1\jdk\jre\bin】下的java.exe 。不是你的电脑安装的java jdk下的java.exe！ 注意第一次，使用SQL D
  • Weblogic Server Console密码修改和遗忘解决方法 bijian1013 Welogic
            在工作中一同事将Weblogic的console的密码忘记了，通过网上查询资料解决，实践整理了一下。 一.修改Console密码         打开weblogic控制台，安全领域 --> myrealm -->&n
  • IllegalStateException: Cannot forward a response that is already committed Cwind javaServlets
    对于初学者来说，一个常见的误解是：当调用 forward() 或者 sendRedirect() 时控制流将会自动跳出原函数。标题所示错误通常是基于此误解而引起的。 示例代码： protected void doPost() { if (someCondition) { sendRedirect(); } forward(); // Thi
  • 基于流的装饰设计模式 木zi_鸣 设计模式
    当想要对已有类的对象进行功能增强时，可以定义一个类，将已有对象传入，基于已有的功能，并提供加强功能。 自定义的类成为装饰类 模仿BufferedReader，对Reader进行包装，体现装饰设计模式 装饰类通常会通过构造方法接受被装饰的对象，并基于被装饰的对象功能，提供更强的功能。 装饰模式比继承灵活，避免继承臃肿，降低了类与类之间的关系 装饰类因为增强已有对象，具备的功能该
  • Linux中的uniq命令 被触发 linux
    Linux命令uniq的作用是过滤重复部分显示文件内容，这个命令读取输入文件，并比较相邻的行。在正常情 况下，第二个及以后更多个重复行将被删去，行比较是根据所用字符集的排序序列进行的。该命令加工后的结果写到输出文件中。输入文件和输出文件必须不同。如 果输入文件用“- ”表示，则从标准输入读取。 AD： uniq [选项] 文件 说明：这个命令读取输入文件，并比较相邻的行。在正常情况下，第二个
  • 正则表达式Pattern 肆无忌惮_ Pattern
    正则表达式是符合一定规则的表达式，用来专门操作字符串，对字符创进行匹配，切割，替换，获取。   例如，我们需要对QQ号码格式进行检验 规则是长度6~12位  不能0开头  只能是数字，我们可以一位一位进行比较，利用parseLong进行判断，或者是用正则表达式来匹配[1-9][0-9]{4,14} 或者 [1-9]\d{4,14} &nbs
  • Oracle高级查询之OVER (PARTITION BY ..) 知了ing oraclesql
    一、rank()/dense_rank() over(partition by ...order by ...) 现在客户有这样一个需求，查询每个部门工资最高的雇员的信息，相信有一定oracle应用知识的同学都能写出下面的SQL语句： select e.ename, e.job, e.sal, e.deptno from scott.emp e, (se
  • Python调试 矮蛋蛋 pythonpdb
    原文地址： http://blog.csdn.net/xuyuefei1988/article/details/19399137 1、下面网上收罗的资料初学者应该够用了，但对比IBM的Python 代码调试技巧： IBM：包括 pdb 模块、利用 PyDev 和 Eclipse 集成进行调试、PyCharm 以及 Debug 日志进行调试： http://www.ibm.com/d
  • webservice传递自定义对象时函数为空，以及boolean不对应的问题 alleni123 webservice
    今天在客户端调用方法 NodeStatus status=iservice.getNodeStatus(). 结果NodeStatus的属性都是null。 进行debug之后，发现服务器端返回的确实是有值的对象。 后来发现原来是因为在客户端，NodeStatus的setter全部被我删除了。 本来是因为逻辑上不需要在客户端使用setter， 结果改了之后竟然不能获取带属性值的
  • java如何干掉指针，又如何巧妙的通过引用来操作指针————>说的就是java指针 百合不是茶
    C语言的强大在于可以直接操作指针的地址，通过改变指针的地址指向来达到更改地址的目的,又是由于c语言的指针过于强大，初学者很难掌握， java的出现解决了c，c++中指针的问题 java将指针封装在底层，开发人员是不能够去操作指针的地址，但是可以通过引用来间接的操作：   定义一个指针p来指向a的地址（&是地址符号）：        
  • Eclipse打不开，提示“An error has occurred.See the log file ***/.log” bijian1013 eclipse
    打开eclipse工作目录的\.metadata\.log文件，发现如下错误： !ENTRY org.eclipse.osgi 4 0 2012-09-10 09:28:57.139 !MESSAGE Application error !STACK 1 java.lang.NoClassDefFoundError: org/eclipse/core/resources/IContai
  • spring aop实例annotation方法实现 bijian1013 javaspringAOPannotation
            在spring aop实例中我们通过配置xml文件来实现AOP，这里学习使用annotation来实现，使用annotation其实就是指明具体的aspect,pointcut和advice。1.申明一个切面(用一个类来实现)在这个切面里,包括了advice和pointcut AdviceMethods.jav
  • [Velocity一]Velocity语法基础入门 bit1129 velocity
    用户和开发人员参考文档 http://velocity.apache.org/engine/releases/velocity-1.7/developer-guide.html   注释 1.行级注释## 2.多行注释#*  *#   变量定义 使用$开头的字符串是变量定义，例如$var1, $var2,   赋值 使用#set为变量赋值，例
  • 【Kafka十一】关于Kafka的副本管理 bit1129 kafka
    1. 关于request.required.acks   request.required.acks控制者Producer写请求的什么时候可以确认写成功，默认是0， 0表示即不进行确认即返回。 1表示Leader写成功即返回，此时还没有进行写数据同步到其它Follower Partition中 -1表示根据指定的最少Partition确认后才返回，这个在   Th
  • lua统计nginx内部变量数据 ronin47 lua nginx　 统计
    server { listen 80; server_name photo.domain.com; location /{set $str $uri; content_by_lua ' local url = ngx.var.uri local res = ngx.location.capture(
  • java-11.二叉树中节点的最大距离 bylijinnan java
    import java.util.ArrayList; import java.util.List; public class MaxLenInBinTree { /* a. 1 / \ 2 3 / \ / \ 4 5 6 7 max=4 pass "root"
  • Netty源码学习-ReadTimeoutHandler bylijinnan javanetty
    ReadTimeoutHandler的实现思路： 开启一个定时任务，如果在指定时间内没有接收到消息，则抛出ReadTimeoutException 这个异常的捕获，在开发中，交给跟在ReadTimeoutHandler后面的ChannelHandler，例如 private final ChannelHandler timeoutHandler = new ReadTim
  • jquery验证上传文件样式及大小(好用) cngolon 文件上传jquery验证
    <!DOCTYPE html> <html> <head> <meta http-equiv="Content-Type" content="text/html; charset=utf-8" /> <script src="jquery1.8/jquery-1.8.0.
  • 浏览器兼容【转】 cuishikuan css浏览器IE
    浏览器兼容问题一：不同浏览器的标签默认的外补丁和内补丁不同 问题症状：随便写几个标签，不加样式控制的情况下，各自的margin 和padding差异较大。 碰到频率:100% 解决方案：CSS里    *{margin:0;padding:0;} 备注：这个是最常见的也是最易解决的一个浏览器兼容性问题，几乎所有的CSS文件开头都会用通配符*来设
  • Shell特殊变量：Shell $0, $#, $*, $@, $?, $$和命令行参数 daizj shell$#$?特殊变量
    前面已经讲到，变量名只能包含数字、字母和下划线，因为某些包含其他字符的变量有特殊含义，这样的变量被称为特殊变量。例如，$ 表示当前Shell进程的ID，即pid，看下面的代码： $echo $$ 运行结果 29949   特殊变量列表 变量 含义 $0 当前脚本的文件名 $n 传递给脚本或函数的参数。n 是一个数字，表示第几个参数。例如，第一个
  • 程序设计KISS 原则-------KEEP IT SIMPLE, STUPID! dcj3sjt126com unix
    翻到一本书，讲到编程一般原则是kiss：Keep It Simple, Stupid.对这个原则深有体会，其实不仅编程如此，而且系统架构也是如此。 KEEP IT SIMPLE, STUPID! 编写只做一件事情，并且要做好的程序；编写可以在一起工作的程序，编写处理文本流的程序，因为这是通用的接口。这就是UNIX哲学.所有的哲学真 正的浓缩为一个铁一样的定律，高明的工程师的神圣的“KISS 原
  • android Activity间List传值 dcj3sjt126com Activity
    第一个Activity： import java.util.ArrayList;import java.util.HashMap;import java.util.List;import java.util.Map;import android.app.Activity;import android.content.Intent;import android.os.Bundle;import a
  • tomcat 设置java虚拟机内存 eksliang tomcat 内存设置
    转载请出自出处：http://eksliang.iteye.com/blog/2117772 http://eksliang.iteye.com/ 常见的内存溢出有以下两种: java.lang.OutOfMemoryError: PermGen space java.lang.OutOfMemoryError: Java heap space   ------------
  • Android 数据库事务处理 gqdy365 android
    使用SQLiteDatabase的beginTransaction()方法可以开启一个事务，程序执行到endTransaction() 方法时会检查事务的标志是否为成功，如果程序执行到endTransaction()之前调用了setTransactionSuccessful() 方法设置事务的标志为成功则提交事务，如果没有调用setTransactionSuccessful() 方法则回滚事务。事
  • Java 打开浏览器 hw1287789687 打开网址open浏览器open browser打开url打开浏览器
    使用java 语言如何打开浏览器呢? 我们先研究下在cmd窗口中,如何打开网址 使用IE 打开 D:\software\bin>cmd /c start iexplore http://hw1287789687.iteye.com/blog/2153709 使用火狐打开 D:\software\bin>cmd /c start firefox http://hw1287789
  • ReplaceGoogleCDN：将 Google CDN 替换为国内的 Chrome 插件 justjavac chromeGooglegoogle apichrome插件
    Chrome Web Store 安装地址： https://chrome.google.com/webstore/detail/replace-google-cdn/kpampjmfiopfpkkepbllemkibefkiice 由于众所周知的原因，只需替换一个域名就可以继续使用Google提供的前端公共库了。 同样，通过script标记引用这些资源，让网站访问速度瞬间提速吧
  • 进程VS.线程 m635674608 线程
    资料来源： http://www.liaoxuefeng.com/wiki/001374738125095c955c1e6d8bb493182103fac9270762a000/001397567993007df355a3394da48f0bf14960f0c78753f000 1、Apache最早就是采用多进程模式 2、IIS服务器默认采用多线程模式 3、多进程优缺点 优点： 多进程模式最大
  • Linux下安装MemCached 字符串 memcached
    前提准备：1. MemCached目前最新版本为：1.4.22，可以从官网下载到。2. MemCached依赖libevent，因此在安装MemCached之前需要先安装libevent。2.1 运行下面命令，查看系统是否已安装libevent。[root@SecurityCheck ~]# rpm -qa|grep libevent libevent-headers-1.4.13-4.el6.n
  • java设计模式之--jdk动态代理（实现aop编程） Supanccy2013 javaDAO设计模式AOP
        与静态代理类对照的是动态代理类，动态代理类的字节码在程序运行时由Java反射机制动态生成，无需程序员手工编写它的源代码。动态代理类不仅简化了编程工作，而且提高了软件系统的可扩展性，因为Java 反射机制可以生成任意类型的动态代理类。java.lang.reflect 包中的Proxy类和InvocationHandler 接口提供了生成动态代理类的能力。 &
  • Spring 4.2新特性-对java8默认方法(default method)定义Bean的支持 wiselyman spring 4
    2.1 默认方法(default method) java8引入了一个default medthod; 用来扩展已有的接口,在对已有接口的使用不产生任何影响的情况下,添加扩展 使用default关键字 Spring 4.2支持加载在默认方法里声明的bean 2.2 将要被声明成bean的类 public class DemoService {
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他