- 【大数据学习 | Spark-Core】RDD的概念与Spark任务的执行流程
Vez'nan的幸福生活
大数据sparkoraclesqljson
1.RDD的设计背景在实际应用中,存在许多迭代式计算,这些应用场景的共同之处是,不同计算阶段之间会重用中间结果,即一个阶段的输出结果会作为下一个阶段的输入。但是,目前的MapReduce框架都是把中间结果写入到HDFS中,带来了大量的数据复制、磁盘IO和序列化开销。显然,如果能将结果保存在内存当中,就可以大量减少IO。RDD就是为了满足这种需求而出现的,它提供了一个抽象的数据架构,我们不必担心底层
- 大数据学习(141)-分布式数据库
viperrrrrrr
大数据学习分布式clickhousehdfshbase
在分布式数据库中主要有hdfs、hbase、clickhouse三种。HDFS(HadoopDistributedFileSystem)、HBase和ClickHouse都是处理大数据的分布式系统,但它们的设计目标、架构和适用场景有所不同。一、HDFS(HadoopDistributedFileSystem)HDFS是Hadoop生态系统的一部分,是一个高度容错的系统,适合存储大量数据。它被设计为
- 大数据从入门到入魔系列————大数据治理技术栈&技术选型
小禾科技
大数据大数据hadoopsparknosql数据仓库ETL
文章目录前言一、大数据的历史二、大数据的必要性2.1为什么要学习大数据2.2大数据维度2.3大数据处理生活场景三、大数据处理问题模式四、大数据的学习路线4.1大数据技术栈4.2大数据学习路线献给读者福利福利免费的大数据学习资料网盘地址:点我!福利福利免费的大数据学习资料网盘地址:点我!福利福利免费的大数据学习资料网盘地址:点我!前言随着信息技术的迅猛发展,我们正处在一个数据驱动的世界中。每一天,全
- 大数据学习(138)-Hive数据分析3
viperrrrrrr
大数据学习hive
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、分组排序问题(TopN变体)1.按多个条件排序并取TopN问题:查询每个部门薪资最高且入职最早的前2名员工。思路:窗口函数中用ORDERBYsalaryDESC,hire_dateASC实现多条件排序。用ROW_NUMBER()生成唯一排名,避免并列。代码模板:WITHrank
- 大数据学习路线,从Linux基础到大型网站高并发处理项目实战
程序员面试吧
相信大家在学习大数据的时候都不知道怎么来学习,因为知识点太多了,也太杂了,没有一个系统的路线来引导大家学习.为了解决大家这个困惑,小编整理了从Linux基础到大型网站高并发处理项目实战的学习路线和知识点,希望大家能够喜欢,文末还有小编整理的视频和电子书籍,也希望大家能够喜欢。Linux理论1.Linux入门—Linux简介、VMWareworkstation安装—整理各大Linux发行版本的区别—
- 大数据学习(131)-Hive数据分析函数总结
viperrrrrrr
大数据学习hive
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦1.CAST函数用于将一种数据类型的表达式显式转换为另一种数据类型。它的语法如下:CAST(expression AS data_type)其中,expression是任何有效的SQL表达式,data_type是目标数据类型。CURRENT_DATE函数是SQL中的一个日期/时间函
- 大数据学习(133)-Hive数据分析2
viperrrrrrr
大数据学习hive
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦十一、分组去重(保留每组最新/最早记录)核心思路:使用窗口函数ROW_NUMBER()按分组排序,保留指定顺序的第一条记录。典型例题:查询每个用户最后一次登录记录。代码模板:WITHranked_loginsAS(SELECTuser_id,login_date,ROW_NUMBE
- 大数据学习(130)-zookeeper
viperrrrrrr
大数据学习zookeeper
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦1.ZooKeeper集群ZooKeeper集群是一个分布式协调服务系统,由多个ZooKeeper服务器节点组成。这些节点通过协作来提供高可用性、一致性和可靠性的服务。以下是ZooKeeper集群的关键特性:分布式架构:集群中的每个节点都可以处理客户端请求,并通过内部通信机制(如心
- 大数据学习(127)-hive日期函数
viperrrrrrr
大数据学习hive
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、日期提取类函数1.dayofweek(date)功能:返回日期的星期几(1=星期日,2=星期一,...,7=星期六)。示例:SELECTdayofweek('2023-10-01');--返回1(星期日)2.year(date)/month(date)/day(date)功能:
- 大数据项目-大数据开发架构学习大纲
brightl09
软件开发大数据方向大数据
大数据项目-大数据开发架构学习大纲超详细的大数据学习路线图,从零基础到资深专家的全路径知识体系,分阶段明确核心知识点、技术栈、实战目标及能力要求,适合系统化学习和职业规划一、基础入门阶段1.目标掌握大数据开发基础工具与核心概念,能完成简单数据处理任务2.核心知识点编程基础:Python/Java语法、数据结构、文件操作、面向对象编程、SQL增删改查、聚合函数、窗口函数、多表关联Linux与Shel
- 大数据学习(125)-hive数据分析
viperrrrrrr
大数据学习
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦1.连续登录问题变种题目:找出恰好连续登录3天的用户(不允许更长的连续区间)。表结构:user_logs(user_id,login_date)。参考答案:WITHranked_logsAS(SELECTuser_id,login_date,ROW_NUMBER()OVER(PAR
- 大数据学习(124)-spark数据倾斜
viperrrrrrr
大数据学习spark
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦1.倾斜表现某些Task执行时间远超其他Task(通常超过平均时间10倍以上)集群资源利用率不均(部分Executor负载过高)作业执行时间主要由少数几个Task决定频繁出现GC超时或OOM错误2.诊断方法scala//通过SparkUI观察Stage和Task的执行时间//查看S
- 大数据学习(121)-sql重点问题
viperrrrrrr
学习
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦窗口函数使用技巧窗口函数是SQL中处理复杂数据分析的强大工具,常用于排名、累计计算、同比环比等场景。以下从基础语法、高频函数、性能优化、典型场景四个维度总结核心技巧,并附示例代码和避坑指南。一、基础语法与核心组件1.完整语法结构sqlOVER([PARTITIONBY字段1,字段2
- 大数据学习之Linux环境搭建
Im_LSY
大数据
设置IP及主机名#1.修改IP$vi/etc/sysconfig/network-scripts/ifconfig-etho#修改IP为自己虚拟机IP段的固定IP:BOOTPROTO=staticIPADDR=192.168.111.11#2.设置主机名$vi/etc/sysconfig/networkNETWORKING=yesHOSTNAME=node01关闭防火墙和selinux#1.防火墙
- 尚硅谷大数据技术课程资料下载:开启大数据学习之旅
裘心国Trent
尚硅谷大数据技术课程资料下载:开启大数据学习之旅尚硅谷大数据技术-教程-学习路线-笔记汇总表课程资料下载项目地址:https://gitcode.com/Resource-Bundle-Collection/1d0e3项目介绍在数字化时代,大数据技术已成为企业决策和创新的核心驱动力。为了帮助广大技术爱好者和从业者快速掌握大数据技术,尚硅谷推出了全面的大数据技术课程资料下载仓库。本仓库不仅提供了详细
- 大数据学习(115)-hive与impala
viperrrrrrr
大数据学习hiveimpala
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦简介:Impala和Hive都是大数据领域中广泛使用的查询工具,它们在功能、性能和适用场景上存在一些差异。本文将深入比较这两者,并探讨Impala的优缺点。一、ApacheHadoop中的角色Impala和Hive都是ApacheHadoop生态系统中的重要组件,用于处理大规模数据
- 大数据学习(112)-HIVE中的窗口函数
viperrrrrrr
学习hivesql
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦在ApacheHive中,窗口函数(WindowFunctions)是一类强大的SQL函数,用于对查询结果集的一个“窗口”或“分组”进行计算,而不减少结果集的行数。以下是Hive中常用的窗口函数分类及示例:1.排名函数函数描述ROW_NUMBER()为结果集中的每一行分配一个唯一的
- 大数据学习(108)-子查询
viperrrrrrr
学习
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦相关子查询会针对外层查询的每一行单独执行,而不是一次性完成所有子查询操作。这意味着子查询的执行次数等于外层查询表的行数。SQL语句SELECTdepartment_nameFROMdepartmentsdWHERE5<(SELECTCOUNT(*)FROMemployeeseWHE
- 大数据学习(107)-sql中case使用场景
viperrrrrrr
大数据学习sql
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦在SQL中,CASE语句是处理条件逻辑的核心工具,以下是6个典型使用场景及示例:1.数据分类统计将连续数值分段统计(如年龄、分数):SELECTCASEWHENage'2025-01-01'THENpriceELSE0END)ASsales_2025,SUM(CASEWHENord
- 大数据学习笔记(三):HDFS分布式文件系统架构原理详解
weixin_34303897
大数据系统架构
在网易云课堂买了卡夫卡的大数据课程,开始学习咯!HDFS分布式文件系统解决问题:海量数据的存储——>分布式结构设计分布式的特点:集群,有多台机器共同协作完成存储主从架构设计HDFS设计思想1.namenode-主节点-领导主要存储文件的属性信息,即文件的元数据:文件的名称文件的位置文件的副本数文件的拥有者、组、权限存储快各个块在哪些datanode节点上2.datanode-从节点-随从存储具体的
- 最全大数据学习路线指南:大数据知识点汇总保姆级教程(2万字长文)
大模型大数据攻城狮
大数据知识大数据思维导图大数据学习大数据入门大数据入行大数据面试大数据BI
目录第一章大数据基础篇1.1Linux基础学习1.2SQL基础学习1.3Java与Scala基础学习第二章数据采集与存储技术2.1Hadoop基础及实战2.2Hive与Hbase技术2.3ETL流程及原理第三章数据管理与查询技术3.1数据仓库体系搭建3.2数据治理体系方法论3.3OLAP查询技术第四章大数据开发工具与平台4.1分布式协调工具Zookeeper4.2消息队列Kafka4.3任务调度工
- 大数据学习(100)-kafka详解
viperrrrrrr
大数据学习kafka
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦ApacheKafka是一个分布式流处理平台,主要用于构建高吞吐量、低延迟、可扩展的实时数据管道和流式应用程序。它广泛应用于日志聚合、事件溯源、消息队列、实时分析等场景。Kafka核心概念1.Producer(生产者)向Kafka发布(写入)消息的客户端。可以指定消息发送到哪个To
- 大数据学习(98)-数据治理
viperrrrrrr
大数据学习数据治理
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、大数据治理的核心目标提升数据质量通过自动化工具实时检测异常值、缺失值或逻辑错误(如使用ApacheGriffin或GreatExpectations)。建立数据质量评分体系,对数据源进行分级管理。元数据驱动管理构建全局元数据目录(如ApacheAtlas),追踪数据血缘、业务含
- 大数据学习(88)-zookeeper实现的高可用(HA)
viperrrrrrr
学习zookeeper大数据
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦ZooKeeper实现高可用的能力详解ZooKeeper不仅是实现分布式系统高可用(HA)的关键工具,其自身也通过特定架构设计实现了高可用特性。一、ZooKeeper自身的高可用实现1.集群架构设计典型部署:由3/5/7个节点组成的ZooKeeperEnsemble[Client]
- 大数据学习(91)-SQL优化
viperrrrrrr
大数据学习sql
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦数据库优化的思路SQL优化在我们书写SQL语句的时候,其实书写的顺序、策略会影响到SQL的性能,虽然实现的功能是一样的,但是它们的性能会有些许差别。因此,下面就讲解在书写SQL的时候,怎么写比较好。①选择最有效率的表名顺序数据库的解析器按照从右到左的顺序处理FROM子句中的表名,F
- 大数据学习-hive(四:数仓搭建,数据监控,数据支持)
宇智波云
大数据项目hivehive
一:数仓搭建1:完备性。要保证所需要的数据全部到达数仓。2:准备性。etl,和数据的计算校验,确保输出的数据准确。3:一致性。确保输出端口一致,防止输出数据不准。4:时效性。每天的定时调度。5:规范性。表名,字段名要进行规范化处理。6:稳定性。确保数仓稳定。二:数仓校验1:建表语句--建表--droptableifexistsdm.dim_dk_vehicle_info_dqc;createtab
- 大数据学习(82)-数仓详解
viperrrrrrr
大数据学习数仓
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、什么是数据仓库数据仓库(下文以“数仓”称),顾名思义,存放数据的仓库,它集合了各个业务系统的数据,以金融业为例,数仓包含了贷款业务、CRM、存款业务等数据。用于企业做数据分析、出报告、做决策;在有些公司也作为各业务系统的数据来源。从逻辑上理解,数据库和数仓没有区别,都是通过数据
- 大数据学习(75)-大数据组件总结
viperrrrrrr
大数据impalayarnhdfshiveCDHmapreduce
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、CDHCDH(ClouderaDistributionIncludingApacheHadoop)是由Cloudera公司提供的一个集成了ApacheHadoop以及相关生态系统的发行版本。CDH是一个大数据平台,简化和加速了大数据处理分析的部署和管理。CDH提供Hadoop的
- 大数据学习(67)- Flume、Sqoop、Kafka、DataX对比
viperrrrrrr
大数据学习flumekafkasqoopdatax
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦工具主要作用数据流向实时性数据源/目标应用场景Flume实时日志采集与传输从数据源到存储系统实时日志文件、网络流量等→HDFS、HBase、Kafka等日志收集、实时监控、实时分析Sqoop关系型数据库与Hadoop间数据同步关系型数据库→Hadoop生态系统(HDFS、Hive、
- 大数据学习(61)-Impala与Hive计算引擎
viperrrrrrr
学习impalahiveyarnhadoop
&&大数据学习&&系列专栏:哲学语录:承认自己的无知,乃是开启智慧的大门如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、impala与yarn资源管理YARN是ApacheHadoop生态系统中的一个资源管理器,它采用了master/slave的架构,使得多个处理框架能够在同一集群上共享资源。Impala作为Hadoop生态系统中的一个组件,可以与YARN集成,以便更好地管理
- 深入浅出Java Annotation(元注解和自定义注解)
Josh_Persistence
Java Annotation元注解自定义注解
一、基本概述
Annontation是Java5开始引入的新特征。中文名称一般叫注解。它提供了一种安全的类似注释的机制,用来将任何的信息或元数据(metadata)与程序元素(类、方法、成员变量等)进行关联。
更通俗的意思是为程序的元素(类、方法、成员变量)加上更直观更明了的说明,这些说明信息是与程序的业务逻辑无关,并且是供指定的工具或
- mysql优化特定类型的查询
annan211
java工作mysql
本节所介绍的查询优化的技巧都是和特定版本相关的,所以对于未来mysql的版本未必适用。
1 优化count查询
对于count这个函数的网上的大部分资料都是错误的或者是理解的都是一知半解的。在做优化之前我们先来看看
真正的count()函数的作用到底是什么。
count()是一个特殊的函数,有两种非常不同的作用,他可以统计某个列值的数量,也可以统计行数。
在统
- MAC下安装多版本JDK和切换几种方式
棋子chessman
jdk
环境:
MAC AIR,OS X 10.10,64位
历史:
过去 Mac 上的 Java 都是由 Apple 自己提供,只支持到 Java 6,并且OS X 10.7 开始系统并不自带(而是可选安装)(原自带的是1.6)。
后来 Apple 加入 OpenJDK 继续支持 Java 6,而 Java 7 将由 Oracle 负责提供。
在终端中输入jav
- javaScript (1)
Array_06
JavaScriptjava浏览器
JavaScript
1、运算符
运算符就是完成操作的一系列符号,它有七类: 赋值运算符(=,+=,-=,*=,/=,%=,<<=,>>=,|=,&=)、算术运算符(+,-,*,/,++,--,%)、比较运算符(>,<,<=,>=,==,===,!=,!==)、逻辑运算符(||,&&,!)、条件运算(?:)、位
- 国内顶级代码分享网站
袁潇含
javajdkoracle.netPHP
现在国内很多开源网站感觉都是为了利益而做的
当然利益是肯定的,否则谁也不会免费的去做网站
&
- Elasticsearch、MongoDB和Hadoop比较
随意而生
mongodbhadoop搜索引擎
IT界在过去几年中出现了一个有趣的现象。很多新的技术出现并立即拥抱了“大数据”。稍微老一点的技术也会将大数据添进自己的特性,避免落大部队太远,我们看到了不同技术之间的边际的模糊化。假如你有诸如Elasticsearch或者Solr这样的搜索引擎,它们存储着JSON文档,MongoDB存着JSON文档,或者一堆JSON文档存放在一个Hadoop集群的HDFS中。你可以使用这三种配
- mac os 系统科研软件总结
张亚雄
mac os
1.1 Microsoft Office for Mac 2011
大客户版,自行搜索。
1.2 Latex (MacTex):
系统环境:https://tug.org/mactex/
&nb
- Maven实战(四)生命周期
AdyZhang
maven
1. 三套生命周期 Maven拥有三套相互独立的生命周期,它们分别为clean,default和site。 每个生命周期包含一些阶段,这些阶段是有顺序的,并且后面的阶段依赖于前面的阶段,用户和Maven最直接的交互方式就是调用这些生命周期阶段。 以clean生命周期为例,它包含的阶段有pre-clean, clean 和 post
- Linux下Jenkins迁移
aijuans
Jenkins
1. 将Jenkins程序目录copy过去 源程序在/export/data/tomcatRoot/ofctest-jenkins.jd.com下面 tar -cvzf jenkins.tar.gz ofctest-jenkins.jd.com &
- request.getInputStream()只能获取一次的问题
ayaoxinchao
requestInputstream
问题:在使用HTTP协议实现应用间接口通信时,服务端读取客户端请求过来的数据,会用到request.getInputStream(),第一次读取的时候可以读取到数据,但是接下来的读取操作都读取不到数据
原因: 1. 一个InputStream对象在被读取完成后,将无法被再次读取,始终返回-1; 2. InputStream并没有实现reset方法(可以重
- 数据库SQL优化大总结之 百万级数据库优化方案
BigBird2012
SQL优化
网上关于SQL优化的教程很多,但是比较杂乱。近日有空整理了一下,写出来跟大家分享一下,其中有错误和不足的地方,还请大家纠正补充。
这篇文章我花费了大量的时间查找资料、修改、排版,希望大家阅读之后,感觉好的话推荐给更多的人,让更多的人看到、纠正以及补充。
1.对查询进行优化,要尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引。
2.应尽量避免在 where
- jsonObject的使用
bijian1013
javajson
在项目中难免会用java处理json格式的数据,因此封装了一个JSONUtil工具类。
JSONUtil.java
package com.bijian.json.study;
import java.util.ArrayList;
import java.util.Date;
import java.util.HashMap;
- [Zookeeper学习笔记之六]Zookeeper源代码分析之Zookeeper.WatchRegistration
bit1129
zookeeper
Zookeeper类是Zookeeper提供给用户访问Zookeeper service的主要API,它包含了如下几个内部类
首先分析它的内部类,从WatchRegistration开始,为指定的znode path注册一个Watcher,
/**
* Register a watcher for a particular p
- 【Scala十三】Scala核心七:部分应用函数
bit1129
scala
何为部分应用函数?
Partially applied function: A function that’s used in an expression and that misses some of its arguments.For instance, if function f has type Int => Int => Int, then f and f(1) are p
- Tomcat Error listenerStart 终极大法
ronin47
tomcat
Tomcat报的错太含糊了,什么错都没报出来,只提示了Error listenerStart。为了调试,我们要获得更详细的日志。可以在WEB-INF/classes目录下新建一个文件叫logging.properties,内容如下
Java代码
handlers = org.apache.juli.FileHandler, java.util.logging.ConsoleHa
- 不用加减符号实现加减法
BrokenDreams
实现
今天有群友发了一个问题,要求不用加减符号(包括负号)来实现加减法。
分析一下,先看最简单的情况,假设1+1,按二进制算的话结果是10,可以看到从右往左的第一位变为0,第二位由于进位变为1。
 
- 读《研磨设计模式》-代码笔记-状态模式-State
bylijinnan
java设计模式
声明: 本文只为方便我个人查阅和理解,详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/
/*
当一个对象的内在状态改变时允许改变其行为,这个对象看起来像是改变了其类
状态模式主要解决的是当控制一个对象状态的条件表达式过于复杂时的情况
把状态的判断逻辑转移到表示不同状态的一系列类中,可以把复杂的判断逻辑简化
如果在
- CUDA程序block和thread超出硬件允许值时的异常
cherishLC
CUDA
调用CUDA的核函数时指定block 和 thread大小,该大小可以是dim3类型的(三维数组),只用一维时可以是usigned int型的。
以下程序验证了当block或thread大小超出硬件允许值时会产生异常!!!GPU根本不会执行运算!!!
所以验证结果的正确性很重要!!!
在VS中创建CUDA项目会有一个模板,里面有更详细的状态验证。
以下程序在K5000GPU上跑的。
- 诡异的超长时间GC问题定位
chenchao051
jvmcmsGChbaseswap
HBase的GC策略采用PawNew+CMS, 这是大众化的配置,ParNew经常会出现停顿时间特别长的情况,有时候甚至长到令人发指的地步,例如请看如下日志:
2012-10-17T05:54:54.293+0800: 739594.224: [GC 739606.508: [ParNew: 996800K->110720K(996800K), 178.8826900 secs] 3700
- maven环境快速搭建
daizj
安装mavne环境配置
一 下载maven
安装maven之前,要先安装jdk及配置JAVA_HOME环境变量。这个安装和配置java环境不用多说。
maven下载地址:http://maven.apache.org/download.html,目前最新的是这个apache-maven-3.2.5-bin.zip,然后解压在任意位置,最好地址中不要带中文字符,这个做java 的都知道,地址中出现中文会出现很多
- PHP网站安全,避免PHP网站受到攻击的方法
dcj3sjt126com
PHP
对于PHP网站安全主要存在这样几种攻击方式:1、命令注入(Command Injection)2、eval注入(Eval Injection)3、客户端脚本攻击(Script Insertion)4、跨网站脚本攻击(Cross Site Scripting, XSS)5、SQL注入攻击(SQL injection)6、跨网站请求伪造攻击(Cross Site Request Forgerie
- yii中给CGridView设置默认的排序根据时间倒序的方法
dcj3sjt126com
GridView
public function searchWithRelated() {
$criteria = new CDbCriteria;
$criteria->together = true; //without th
- Java集合对象和数组对象的转换
dyy_gusi
java集合
在开发中,我们经常需要将集合对象(List,Set)转换为数组对象,或者将数组对象转换为集合对象。Java提供了相互转换的工具,但是我们使用的时候需要注意,不能乱用滥用。
1、数组对象转换为集合对象
最暴力的方式是new一个集合对象,然后遍历数组,依次将数组中的元素放入到新的集合中,但是这样做显然过
- nginx同一主机部署多个应用
geeksun
nginx
近日有一需求,需要在一台主机上用nginx部署2个php应用,分别是wordpress和wiki,探索了半天,终于部署好了,下面把过程记录下来。
1. 在nginx下创建vhosts目录,用以放置vhost文件。
mkdir vhosts
2. 修改nginx.conf的配置, 在http节点增加下面内容设置,用来包含vhosts里的配置文件
#
- ubuntu添加admin权限的用户账号
hongtoushizi
ubuntuuseradd
ubuntu创建账号的方式通常用到两种:useradd 和adduser . 本人尝试了useradd方法,步骤如下:
1:useradd
使用useradd时,如果后面不加任何参数的话,如:sudo useradd sysadm 创建出来的用户将是默认的三无用户:无home directory ,无密码,无系统shell。
顾应该如下操作:
- 第五章 常用Lua开发库2-JSON库、编码转换、字符串处理
jinnianshilongnian
nginxlua
JSON库
在进行数据传输时JSON格式目前应用广泛,因此从Lua对象与JSON字符串之间相互转换是一个非常常见的功能;目前Lua也有几个JSON库,本人用过cjson、dkjson。其中cjson的语法严格(比如unicode \u0020\u7eaf),要求符合规范否则会解析失败(如\u002),而dkjson相对宽松,当然也可以通过修改cjson的源码来完成
- Spring定时器配置的两种实现方式OpenSymphony Quartz和java Timer详解
yaerfeng1989
timerquartz定时器
原创整理不易,转载请注明出处:Spring定时器配置的两种实现方式OpenSymphony Quartz和java Timer详解
代码下载地址:http://www.zuidaima.com/share/1772648445103104.htm
有两种流行Spring定时器配置:Java的Timer类和OpenSymphony的Quartz。
1.Java Timer定时
首先继承jav
- Linux下df与du两个命令的差别?
pda158
linux
一、df显示文件系统的使用情况,与du比較,就是更全盘化。 最经常使用的就是 df -T,显示文件系统的使用情况并显示文件系统的类型。 举比例如以下: [root@localhost ~]# df -T Filesystem Type &n
- [转]SQLite的工具类 ---- 通过反射把Cursor封装到VO对象
ctfzh
VOandroidsqlite反射Cursor
在写DAO层时,觉得从Cursor里一个一个的取出字段值再装到VO(值对象)里太麻烦了,就写了一个工具类,用到了反射,可以把查询记录的值装到对应的VO里,也可以生成该VO的List。
使用时需要注意:
考虑到Android的性能问题,VO没有使用Setter和Getter,而是直接用public的属性。
表中的字段名需要和VO的属性名一样,要是不一样就得在查询的SQL中
- 该学习笔记用到的Employee表
vipbooks
oraclesql工作
这是我在学习Oracle是用到的Employee表,在该笔记中用到的就是这张表,大家可以用它来学习和练习。
drop table Employee;
-- 员工信息表
create table Employee(
-- 员工编号
EmpNo number(3) primary key,
-- 姓