- 【大数据学习 | Spark-Core】RDD的概念与Spark任务的执行流程
Vez'nan的幸福生活
大数据sparkoraclesqljson
1.RDD的设计背景在实际应用中,存在许多迭代式计算,这些应用场景的共同之处是,不同计算阶段之间会重用中间结果,即一个阶段的输出结果会作为下一个阶段的输入。但是,目前的MapReduce框架都是把中间结果写入到HDFS中,带来了大量的数据复制、磁盘IO和序列化开销。显然,如果能将结果保存在内存当中,就可以大量减少IO。RDD就是为了满足这种需求而出现的,它提供了一个抽象的数据架构,我们不必担心底层
- 大数据学习(141)-分布式数据库
viperrrrrrr
大数据学习分布式clickhousehdfshbase
在分布式数据库中主要有hdfs、hbase、clickhouse三种。HDFS(HadoopDistributedFileSystem)、HBase和ClickHouse都是处理大数据的分布式系统,但它们的设计目标、架构和适用场景有所不同。一、HDFS(HadoopDistributedFileSystem)HDFS是Hadoop生态系统的一部分,是一个高度容错的系统,适合存储大量数据。它被设计为
- 大数据从入门到入魔系列————大数据治理技术栈&技术选型
小禾科技
大数据大数据hadoopsparknosql数据仓库ETL
文章目录前言一、大数据的历史二、大数据的必要性2.1为什么要学习大数据2.2大数据维度2.3大数据处理生活场景三、大数据处理问题模式四、大数据的学习路线4.1大数据技术栈4.2大数据学习路线献给读者福利福利免费的大数据学习资料网盘地址:点我!福利福利免费的大数据学习资料网盘地址:点我!福利福利免费的大数据学习资料网盘地址:点我!前言随着信息技术的迅猛发展,我们正处在一个数据驱动的世界中。每一天,全
- 大数据学习(138)-Hive数据分析3
viperrrrrrr
大数据学习hive
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、分组排序问题(TopN变体)1.按多个条件排序并取TopN问题:查询每个部门薪资最高且入职最早的前2名员工。思路:窗口函数中用ORDERBYsalaryDESC,hire_dateASC实现多条件排序。用ROW_NUMBER()生成唯一排名,避免并列。代码模板:WITHrank
- 大数据学习路线,从Linux基础到大型网站高并发处理项目实战
程序员面试吧
相信大家在学习大数据的时候都不知道怎么来学习,因为知识点太多了,也太杂了,没有一个系统的路线来引导大家学习.为了解决大家这个困惑,小编整理了从Linux基础到大型网站高并发处理项目实战的学习路线和知识点,希望大家能够喜欢,文末还有小编整理的视频和电子书籍,也希望大家能够喜欢。Linux理论1.Linux入门—Linux简介、VMWareworkstation安装—整理各大Linux发行版本的区别—
- 大数据学习(131)-Hive数据分析函数总结
viperrrrrrr
大数据学习hive
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦1.CAST函数用于将一种数据类型的表达式显式转换为另一种数据类型。它的语法如下:CAST(expression AS data_type)其中,expression是任何有效的SQL表达式,data_type是目标数据类型。CURRENT_DATE函数是SQL中的一个日期/时间函
- 大数据学习(133)-Hive数据分析2
viperrrrrrr
大数据学习hive
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦十一、分组去重(保留每组最新/最早记录)核心思路:使用窗口函数ROW_NUMBER()按分组排序,保留指定顺序的第一条记录。典型例题:查询每个用户最后一次登录记录。代码模板:WITHranked_loginsAS(SELECTuser_id,login_date,ROW_NUMBE
- 大数据学习(130)-zookeeper
viperrrrrrr
大数据学习zookeeper
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦1.ZooKeeper集群ZooKeeper集群是一个分布式协调服务系统,由多个ZooKeeper服务器节点组成。这些节点通过协作来提供高可用性、一致性和可靠性的服务。以下是ZooKeeper集群的关键特性:分布式架构:集群中的每个节点都可以处理客户端请求,并通过内部通信机制(如心
- 大数据学习(127)-hive日期函数
viperrrrrrr
大数据学习hive
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、日期提取类函数1.dayofweek(date)功能:返回日期的星期几(1=星期日,2=星期一,...,7=星期六)。示例:SELECTdayofweek('2023-10-01');--返回1(星期日)2.year(date)/month(date)/day(date)功能:
- 大数据项目-大数据开发架构学习大纲
brightl09
软件开发大数据方向大数据
大数据项目-大数据开发架构学习大纲超详细的大数据学习路线图,从零基础到资深专家的全路径知识体系,分阶段明确核心知识点、技术栈、实战目标及能力要求,适合系统化学习和职业规划一、基础入门阶段1.目标掌握大数据开发基础工具与核心概念,能完成简单数据处理任务2.核心知识点编程基础:Python/Java语法、数据结构、文件操作、面向对象编程、SQL增删改查、聚合函数、窗口函数、多表关联Linux与Shel
- 大数据学习(125)-hive数据分析
viperrrrrrr
大数据学习
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦1.连续登录问题变种题目:找出恰好连续登录3天的用户(不允许更长的连续区间)。表结构:user_logs(user_id,login_date)。参考答案:WITHranked_logsAS(SELECTuser_id,login_date,ROW_NUMBER()OVER(PAR
- 大数据学习(124)-spark数据倾斜
viperrrrrrr
大数据学习spark
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦1.倾斜表现某些Task执行时间远超其他Task(通常超过平均时间10倍以上)集群资源利用率不均(部分Executor负载过高)作业执行时间主要由少数几个Task决定频繁出现GC超时或OOM错误2.诊断方法scala//通过SparkUI观察Stage和Task的执行时间//查看S
- 大数据学习(121)-sql重点问题
viperrrrrrr
学习
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦窗口函数使用技巧窗口函数是SQL中处理复杂数据分析的强大工具,常用于排名、累计计算、同比环比等场景。以下从基础语法、高频函数、性能优化、典型场景四个维度总结核心技巧,并附示例代码和避坑指南。一、基础语法与核心组件1.完整语法结构sqlOVER([PARTITIONBY字段1,字段2
- 大数据学习之Linux环境搭建
Im_LSY
大数据
设置IP及主机名#1.修改IP$vi/etc/sysconfig/network-scripts/ifconfig-etho#修改IP为自己虚拟机IP段的固定IP:BOOTPROTO=staticIPADDR=192.168.111.11#2.设置主机名$vi/etc/sysconfig/networkNETWORKING=yesHOSTNAME=node01关闭防火墙和selinux#1.防火墙
- 尚硅谷大数据技术课程资料下载:开启大数据学习之旅
裘心国Trent
尚硅谷大数据技术课程资料下载:开启大数据学习之旅尚硅谷大数据技术-教程-学习路线-笔记汇总表课程资料下载项目地址:https://gitcode.com/Resource-Bundle-Collection/1d0e3项目介绍在数字化时代,大数据技术已成为企业决策和创新的核心驱动力。为了帮助广大技术爱好者和从业者快速掌握大数据技术,尚硅谷推出了全面的大数据技术课程资料下载仓库。本仓库不仅提供了详细
- 大数据学习(115)-hive与impala
viperrrrrrr
大数据学习hiveimpala
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦简介:Impala和Hive都是大数据领域中广泛使用的查询工具,它们在功能、性能和适用场景上存在一些差异。本文将深入比较这两者,并探讨Impala的优缺点。一、ApacheHadoop中的角色Impala和Hive都是ApacheHadoop生态系统中的重要组件,用于处理大规模数据
- 大数据学习(112)-HIVE中的窗口函数
viperrrrrrr
学习hivesql
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦在ApacheHive中,窗口函数(WindowFunctions)是一类强大的SQL函数,用于对查询结果集的一个“窗口”或“分组”进行计算,而不减少结果集的行数。以下是Hive中常用的窗口函数分类及示例:1.排名函数函数描述ROW_NUMBER()为结果集中的每一行分配一个唯一的
- 大数据学习(108)-子查询
viperrrrrrr
学习
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦相关子查询会针对外层查询的每一行单独执行,而不是一次性完成所有子查询操作。这意味着子查询的执行次数等于外层查询表的行数。SQL语句SELECTdepartment_nameFROMdepartmentsdWHERE5<(SELECTCOUNT(*)FROMemployeeseWHE
- 大数据学习(107)-sql中case使用场景
viperrrrrrr
大数据学习sql
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦在SQL中,CASE语句是处理条件逻辑的核心工具,以下是6个典型使用场景及示例:1.数据分类统计将连续数值分段统计(如年龄、分数):SELECTCASEWHENage'2025-01-01'THENpriceELSE0END)ASsales_2025,SUM(CASEWHENord
- 大数据学习笔记(三):HDFS分布式文件系统架构原理详解
weixin_34303897
大数据系统架构
在网易云课堂买了卡夫卡的大数据课程,开始学习咯!HDFS分布式文件系统解决问题:海量数据的存储——>分布式结构设计分布式的特点:集群,有多台机器共同协作完成存储主从架构设计HDFS设计思想1.namenode-主节点-领导主要存储文件的属性信息,即文件的元数据:文件的名称文件的位置文件的副本数文件的拥有者、组、权限存储快各个块在哪些datanode节点上2.datanode-从节点-随从存储具体的
- 最全大数据学习路线指南:大数据知识点汇总保姆级教程(2万字长文)
大模型大数据攻城狮
大数据知识大数据思维导图大数据学习大数据入门大数据入行大数据面试大数据BI
目录第一章大数据基础篇1.1Linux基础学习1.2SQL基础学习1.3Java与Scala基础学习第二章数据采集与存储技术2.1Hadoop基础及实战2.2Hive与Hbase技术2.3ETL流程及原理第三章数据管理与查询技术3.1数据仓库体系搭建3.2数据治理体系方法论3.3OLAP查询技术第四章大数据开发工具与平台4.1分布式协调工具Zookeeper4.2消息队列Kafka4.3任务调度工
- 大数据学习(100)-kafka详解
viperrrrrrr
大数据学习kafka
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦ApacheKafka是一个分布式流处理平台,主要用于构建高吞吐量、低延迟、可扩展的实时数据管道和流式应用程序。它广泛应用于日志聚合、事件溯源、消息队列、实时分析等场景。Kafka核心概念1.Producer(生产者)向Kafka发布(写入)消息的客户端。可以指定消息发送到哪个To
- 大数据学习(98)-数据治理
viperrrrrrr
大数据学习数据治理
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、大数据治理的核心目标提升数据质量通过自动化工具实时检测异常值、缺失值或逻辑错误(如使用ApacheGriffin或GreatExpectations)。建立数据质量评分体系,对数据源进行分级管理。元数据驱动管理构建全局元数据目录(如ApacheAtlas),追踪数据血缘、业务含
- 大数据学习(88)-zookeeper实现的高可用(HA)
viperrrrrrr
学习zookeeper大数据
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦ZooKeeper实现高可用的能力详解ZooKeeper不仅是实现分布式系统高可用(HA)的关键工具,其自身也通过特定架构设计实现了高可用特性。一、ZooKeeper自身的高可用实现1.集群架构设计典型部署:由3/5/7个节点组成的ZooKeeperEnsemble[Client]
- 大数据学习(91)-SQL优化
viperrrrrrr
大数据学习sql
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦数据库优化的思路SQL优化在我们书写SQL语句的时候,其实书写的顺序、策略会影响到SQL的性能,虽然实现的功能是一样的,但是它们的性能会有些许差别。因此,下面就讲解在书写SQL的时候,怎么写比较好。①选择最有效率的表名顺序数据库的解析器按照从右到左的顺序处理FROM子句中的表名,F
- 大数据学习-hive(四:数仓搭建,数据监控,数据支持)
宇智波云
大数据项目hivehive
一:数仓搭建1:完备性。要保证所需要的数据全部到达数仓。2:准备性。etl,和数据的计算校验,确保输出的数据准确。3:一致性。确保输出端口一致,防止输出数据不准。4:时效性。每天的定时调度。5:规范性。表名,字段名要进行规范化处理。6:稳定性。确保数仓稳定。二:数仓校验1:建表语句--建表--droptableifexistsdm.dim_dk_vehicle_info_dqc;createtab
- 大数据学习(82)-数仓详解
viperrrrrrr
大数据学习数仓
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、什么是数据仓库数据仓库(下文以“数仓”称),顾名思义,存放数据的仓库,它集合了各个业务系统的数据,以金融业为例,数仓包含了贷款业务、CRM、存款业务等数据。用于企业做数据分析、出报告、做决策;在有些公司也作为各业务系统的数据来源。从逻辑上理解,数据库和数仓没有区别,都是通过数据
- 大数据学习(75)-大数据组件总结
viperrrrrrr
大数据impalayarnhdfshiveCDHmapreduce
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、CDHCDH(ClouderaDistributionIncludingApacheHadoop)是由Cloudera公司提供的一个集成了ApacheHadoop以及相关生态系统的发行版本。CDH是一个大数据平台,简化和加速了大数据处理分析的部署和管理。CDH提供Hadoop的
- 大数据学习(67)- Flume、Sqoop、Kafka、DataX对比
viperrrrrrr
大数据学习flumekafkasqoopdatax
大数据学习系列专栏:哲学语录:用力所能及,改变世界。如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦工具主要作用数据流向实时性数据源/目标应用场景Flume实时日志采集与传输从数据源到存储系统实时日志文件、网络流量等→HDFS、HBase、Kafka等日志收集、实时监控、实时分析Sqoop关系型数据库与Hadoop间数据同步关系型数据库→Hadoop生态系统(HDFS、Hive、
- 大数据学习(61)-Impala与Hive计算引擎
viperrrrrrr
学习impalahiveyarnhadoop
&&大数据学习&&系列专栏:哲学语录:承认自己的无知,乃是开启智慧的大门如果觉得博主的文章还不错的话,请点赞+收藏⭐️+留言支持一下博主哦一、impala与yarn资源管理YARN是ApacheHadoop生态系统中的一个资源管理器,它采用了master/slave的架构,使得多个处理框架能够在同一集群上共享资源。Impala作为Hadoop生态系统中的一个组件,可以与YARN集成,以便更好地管理
- Nginx负载均衡
510888780
nginx应用服务器
Nginx负载均衡一些基础知识:
nginx 的 upstream目前支持 4 种方式的分配
1)、轮询(默认)
每个请求按时间顺序逐一分配到不同的后端服务器,如果后端服务器down掉,能自动剔除。
2)、weight
指定轮询几率,weight和访问比率成正比
- RedHat 6.4 安装 rabbitmq
bylijinnan
erlangrabbitmqredhat
在 linux 下安装软件就是折腾,首先是测试机不能上外网要找运维开通,开通后发现测试机的 yum 不能使用于是又要配置 yum 源,最后安装 rabbitmq 时也尝试了两种方法最后才安装成功
机器版本:
[root@redhat1 rabbitmq]# lsb_release
LSB Version: :base-4.0-amd64:base-4.0-noarch:core
- FilenameUtils工具类
eksliang
FilenameUtilscommon-io
转载请出自出处:http://eksliang.iteye.com/blog/2217081 一、概述
这是一个Java操作文件的常用库,是Apache对java的IO包的封装,这里面有两个非常核心的类FilenameUtils跟FileUtils,其中FilenameUtils是对文件名操作的封装;FileUtils是文件封装,开发中对文件的操作,几乎都可以在这个框架里面找到。 非常的好用。
- xml文件解析SAX
不懂事的小屁孩
xml
xml文件解析:xml文件解析有四种方式,
1.DOM生成和解析XML文档(SAX是基于事件流的解析)
2.SAX生成和解析XML文档(基于XML文档树结构的解析)
3.DOM4J生成和解析XML文档
4.JDOM生成和解析XML
本文章用第一种方法进行解析,使用android常用的DefaultHandler
import org.xml.sax.Attributes;
- 通过定时任务执行mysql的定期删除和新建分区,此处是按日分区
酷的飞上天空
mysql
使用python脚本作为命令脚本,linux的定时任务来每天定时执行
#!/usr/bin/python
# -*- coding: utf8 -*-
import pymysql
import datetime
import calendar
#要分区的表
table_name = 'my_table'
#连接数据库的信息
host,user,passwd,db =
- 如何搭建数据湖架构?听听专家的意见
蓝儿唯美
架构
Edo Interactive在几年前遇到一个大问题:公司使用交易数据来帮助零售商和餐馆进行个性化促销,但其数据仓库没有足够时间去处理所有的信用卡和借记卡交易数据
“我们要花费27小时来处理每日的数据量,”Edo主管基础设施和信息系统的高级副总裁Tim Garnto说道:“所以在2013年,我们放弃了现有的基于PostgreSQL的关系型数据库系统,使用了Hadoop集群作为公司的数
- spring学习——控制反转与依赖注入
a-john
spring
控制反转(Inversion of Control,英文缩写为IoC)是一个重要的面向对象编程的法则来削减计算机程序的耦合问题,也是轻量级的Spring框架的核心。 控制反转一般分为两种类型,依赖注入(Dependency Injection,简称DI)和依赖查找(Dependency Lookup)。依赖注入应用比较广泛。
- 用spool+unixshell生成文本文件的方法
aijuans
xshell
例如我们把scott.dept表生成文本文件的语句写成dept.sql,内容如下:
set pages 50000;
set lines 200;
set trims on;
set heading off;
spool /oracle_backup/log/test/dept.lst;
select deptno||','||dname||','||loc
- 1、基础--名词解析(OOA/OOD/OOP)
asia007
学习基础知识
OOA:Object-Oriented Analysis(面向对象分析方法)
是在一个系统的开发过程中进行了系统业务调查以后,按照面向对象的思想来分析问题。OOA与结构化分析有较大的区别。OOA所强调的是在系统调查资料的基础上,针对OO方法所需要的素材进行的归类分析和整理,而不是对管理业务现状和方法的分析。
OOA(面向对象的分析)模型由5个层次(主题层、对象类层、结构层、属性层和服务层)
- 浅谈java转成json编码格式技术
百合不是茶
json编码java转成json编码
json编码;是一个轻量级的数据存储和传输的语言
在java中需要引入json相关的包,引包方式在工程的lib下就可以了
JSON与JAVA数据的转换(JSON 即 JavaScript Object Natation,它是一种轻量级的数据交换格式,非
常适合于服务器与 JavaScript 之间的数据的交
- web.xml之Spring配置(基于Spring+Struts+Ibatis)
bijian1013
javaweb.xmlSSIspring配置
指定Spring配置文件位置
<context-param>
<param-name>contextConfigLocation</param-name>
<param-value>
/WEB-INF/spring-dao-bean.xml,/WEB-INF/spring-resources.xml,
/WEB-INF/
- Installing SonarQube(Fail to download libraries from server)
sunjing
InstallSonar
1. Download and unzip the SonarQube distribution
2. Starting the Web Server
The default port is "9000" and the context path is "/". These values can be changed in &l
- 【MongoDB学习笔记十一】Mongo副本集基本的增删查
bit1129
mongodb
一、创建复本集
假设mongod,mongo已经配置在系统路径变量上,启动三个命令行窗口,分别执行如下命令:
mongod --port 27017 --dbpath data1 --replSet rs0
mongod --port 27018 --dbpath data2 --replSet rs0
mongod --port 27019 -
- Anychart图表系列二之执行Flash和HTML5渲染
白糖_
Flash
今天介绍Anychart的Flash和HTML5渲染功能
HTML5
Anychart从6.0第一个版本起,已经逐渐开始支持各种图的HTML5渲染效果了,也就是说即使你没有安装Flash插件,只要浏览器支持HTML5,也能看到Anychart的图形(不过这些是需要做一些配置的)。
这里要提醒下大家,Anychart6.0版本对HTML5的支持还不算很成熟,目前还处于
- Laravel版本更新异常4.2.8-> 4.2.9 Declaration of ... CompilerEngine ... should be compa
bozch
laravel
昨天在为了把laravel升级到最新的版本,突然之间就出现了如下错误:
ErrorException thrown with message "Declaration of Illuminate\View\Engines\CompilerEngine::handleViewException() should be compatible with Illuminate\View\Eng
- 编程之美-NIM游戏分析-石头总数为奇数时如何保证先动手者必胜
bylijinnan
编程之美
import java.util.Arrays;
import java.util.Random;
public class Nim {
/**编程之美 NIM游戏分析
问题:
有N块石头和两个玩家A和B,玩家A先将石头随机分成若干堆,然后按照BABA...的顺序不断轮流取石头,
能将剩下的石头一次取光的玩家获胜,每次取石头时,每个玩家只能从若干堆石头中任选一堆,
- lunce创建索引及简单查询
chengxuyuancsdn
查询创建索引lunce
import java.io.File;
import java.io.IOException;
import org.apache.lucene.analysis.Analyzer;
import org.apache.lucene.analysis.standard.StandardAnalyzer;
import org.apache.lucene.document.Docume
- [IT与投资]坚持独立自主的研究核心技术
comsci
it
和别人合作开发某项产品....如果互相之间的技术水平不同,那么这种合作很难进行,一般都会成为强者控制弱者的方法和手段.....
所以弱者,在遇到技术难题的时候,最好不要一开始就去寻求强者的帮助,因为在我们这颗星球上,生物都有一种控制其
- flashback transaction闪回事务查询
daizj
oraclesql闪回事务
闪回事务查询有别于闪回查询的特点有以下3个:
(1)其正常工作不但需要利用撤销数据,还需要事先启用最小补充日志。
(2)返回的结果不是以前的“旧”数据,而是能够将当前数据修改为以前的样子的撤销SQL(Undo SQL)语句。
(3)集中地在名为flashback_transaction_query表上查询,而不是在各个表上通过“as of”或“vers
- Java I/O之FilenameFilter类列举出指定路径下某个扩展名的文件
游其是你
FilenameFilter
这是一个FilenameFilter类用法的例子,实现的列举出“c:\\folder“路径下所有以“.jpg”扩展名的文件。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28
- C语言学习五函数,函数的前置声明以及如何在软件开发中合理的设计函数来解决实际问题
dcj3sjt126com
c
# include <stdio.h>
int f(void) //括号中的void表示该函数不能接受数据,int表示返回的类型为int类型
{
return 10; //向主调函数返回10
}
void g(void) //函数名前面的void表示该函数没有返回值
{
//return 10; //error 与第8行行首的void相矛盾
}
in
- 今天在测试环境使用yum安装,遇到一个问题: Error: Cannot retrieve metalink for repository: epel. Pl
dcj3sjt126com
centos
今天在测试环境使用yum安装,遇到一个问题:
Error: Cannot retrieve metalink for repository: epel. Please verify its path and try again
处理很简单,修改文件“/etc/yum.repos.d/epel.repo”, 将baseurl的注释取消, mirrorlist注释掉。即可。
&n
- 单例模式
shuizhaosi888
单例模式
单例模式 懒汉式
public class RunMain {
/**
* 私有构造
*/
private RunMain() {
}
/**
* 内部类,用于占位,只有
*/
private static class SingletonRunMain {
priv
- Spring Security(09)——Filter
234390216
Spring Security
Filter
目录
1.1 Filter顺序
1.2 添加Filter到FilterChain
1.3 DelegatingFilterProxy
1.4 FilterChainProxy
1.5
- 公司项目NODEJS实践0.1
逐行分析JS源代码
mongodbnginxubuntunodejs
一、前言
前端如何独立用nodeJs实现一个简单的注册、登录功能,是不是只用nodejs+sql就可以了?其实是可以实现,但离实际应用还有距离,那要怎么做才是实际可用的。
网上有很多nod
- java.lang.Math
liuhaibo_ljf
javaMathlang
System.out.println(Math.PI);
System.out.println(Math.abs(1.2));
System.out.println(Math.abs(1.2));
System.out.println(Math.abs(1));
System.out.println(Math.abs(111111111));
System.out.println(Mat
- linux下时间同步
nonobaba
ntp
今天在linux下做hbase集群的时候,发现hmaster启动成功了,但是用hbase命令进入shell的时候报了一个错误 PleaseHoldException: Master is initializing,查看了日志,大致意思是说master和slave时间不同步,没办法,只好找一种手动同步一下,后来发现一共部署了10来台机器,手动同步偏差又比较大,所以还是从网上找现成的解决方
- ZooKeeper3.4.6的集群部署
roadrunners
zookeeper集群部署
ZooKeeper是Apache的一个开源项目,在分布式服务中应用比较广泛。它主要用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务、状态同步、集群管理、配置文件管理、同步锁、队列等。这里主要讲集群中ZooKeeper的部署。
1、准备工作
我们准备3台机器做ZooKeeper集群,分别在3台机器上创建ZooKeeper需要的目录。
数据存储目录
- Java高效读取大文件
tomcat_oracle
java
读取文件行的标准方式是在内存中读取,Guava 和Apache Commons IO都提供了如下所示快速读取文件行的方法: Files.readLines(new File(path), Charsets.UTF_8); FileUtils.readLines(new File(path)); 这种方法带来的问题是文件的所有行都被存放在内存中,当文件足够大时很快就会导致
- 微信支付api返回的xml转换为Map的方法
xu3508620
xmlmap微信api
举例如下:
<xml>
<return_code><![CDATA[SUCCESS]]></return_code>
<return_msg><![CDATA[OK]]></return_msg>
<appid><