E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式集群
linux部署minio对象存储、docker部署minio象存储、k8s部署minio象存储
种拓扑结构linux部署minio对象存储linux单节点安装minio-单节点单磁盘minio客户端工具mclinux生产环境-单节点多磁盘部署miniolinux生产环境-多节点多磁盘部署minio集群(
分布式集群
MssGuo
·
2023-10-16 19:45
kubernetes
kubernetes
minio
Minio
分布式集群
部署(不使用docker)
一、Minio
分布式集群
搭建(多机器多硬盘)1、环境说明:4台服务器节点数据目录(不能是/root下的)进程/脚本目录10.34.252.87/home/minio/{data1.data2}/home
晴朗711
·
2023-10-15 22:01
存储
分布式存储
基于docker部署minio
分布式集群
,多机器多挂载,跟着敲就对了
背景:博客上搜了一遍,试了一圈,不是少符号就是机器、挂载情况不搭,配置完网络不通,最后发现了这篇博友的docker部署文章,终于有了头绪。。。一、准备1、硬件虚拟机硬件配置(内核版本>=4.0)挂载指定端口服务组件172.19.2.368核+16G运行内存、40G系统盘+100G*4磁盘磁盘vdb、vdc、vdd、vde挂载到宿主机/minio/data1到/minio/data49000,900
草莓不苦
·
2023-10-15 22:27
运行环境
docker
分布式
容器
MinIO
分布式集群
搭建
背景阿里云迁移IDC,选型MinIO来替代阿里云OSS,并为K8S提供对象存储服务。简介MinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口,非常适合于存储大容量非结构化的数据,例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等,而一个对象文件可以是任意大小,从几kb到最大5T不等。MinIO是一个非常轻量的服务,可以很简单的和其他应用的
叨叨软件测试
·
2023-10-15 21:53
minio
minio
对象存储
k8s使用minio
分布式集群
作为存储--基础配置篇
背景:minio
分布式集群
是单独的服务,并没有被k8s管理,k8s与minio集群在不同的服务器上部署,k8s需要使用minio
分布式集群
作为k8s集群的配置文件及其他文件的存储介质。
草莓不苦
·
2023-10-15 21:47
运行环境
分布式存储
kubernetes
分布式
容器
聊聊面试中关于并发问题的应对方案
主题又到面试季了,从群里,看到许多同学分享了自己的面试题目,我也抽空在网上搜索了一些许多公司使用的面试题,目前校招和社招的面试题基本都集中在几个大方向上,主要是:Java基础、并发、JVM、算法、数据库、一些框架、
分布式集群
等
技术宅不太宅
·
2023-10-15 18:48
java
面试
并发编程
多线程
Java
程序员
scrapy-redis
分布式集群
redis配置
#----------------------------------------Redis单机模式-------------------------------------#Redis单机地址REDIS_HOST="172.25.2.25"REDIS_PORT=6379#REDIS单机模式配置参数REDIS_PARAMS={"password":"xxxx","db":0}#----------
沫明
·
2023-10-15 15:12
Elasticsearch(1)
es的特点1.可以作为一个大型
分布式集群
(数百台服务器)技术,处理PB级数据,服务大公司;也可以运行在单机上,服务小公司2.将全文检索、数据分析以及分布式技术,合并在了一起,并能对海量
长安十一少
·
2023-10-14 12:10
【minio学习笔记】
ErasureCode)5、存储方案二、环境搭建1、单机部署介绍1.1概念1.22单机部署(无纠删码模式)1.3使用Docker单机部署(无纠删码模式)1.4使用Docker单机部署(纠删码模式)2、
分布式集群
部署介绍
sxsl_lwp
·
2023-10-13 13:57
技术类
学习
java
开发语言
zookeeper的设计原理及使用场景
zookeeper作为一个分布式的服务框架,主要用来解决
分布式集群
中应用系统的一致性问题,解决分布式环境下多个进程或者多个中间件之间的同步控制,使有序访问某类资源。
wangpf2011
·
2023-10-13 02:37
Zookeeper特性与节点数据类型详解
1.Zookeeper介绍ZooKeeper是一个开源的分布式协调框架,是ApacheHadoop的一个子项目,主要用来解决
分布式集群
中应用系统的一致性问题。
so1ucky
·
2023-10-12 09:44
zookeeper
分布式
云原生
Hadoop
分布式集群
搭建教程
目录前言环境准备一、创建虚拟机二、虚拟机网络配置三、克隆虚拟机四、Linux系统配置五、Hadoop的部署配置六、Hadoop集群的启动前言大数据课程需要搭建Hadoop
分布式集群
,在这里记录一下搭建过程环境准备搭建
韭菜盖饭
·
2023-10-12 05:12
大数据
分布式
hadoop
大数据
RocketMQ快速实战以及集群架构详解
简介二、RocketMQ产品特点RocketMQ介绍RocketMQ特点三、RocketMQ快速实战快速实现消息收发命令行快速实现消息收发搭建Maven客户端项目搭建RocketMQ可视化管理服务四、升级
分布式集群
五
小超同学卷起来
·
2023-10-12 02:55
java-rocketmq
rocketmq
架构
分布式锁1:5种方案解决商品超卖的方案的优缺点
在
分布式集群
、微服务、云原生横行的当下,如何保证不同进程、不同服务、不同机器的线程安全问题。jdk并没有给我们提供既有的解决方案。需要自己通过编写方案来解决,目前主流的实现有以下方式:基于mysq
健康平安的活着
·
2023-10-12 01:52
分布式
分布式
Zookeeper基本原理及集群环境搭建
5.2结点类型5.3结点属性6.Zookeeper的Watch机制6.1Watch机制特点6.2通知状态和事件类型1.Zookeeper简介Zookeeper是一个分布式协调服务的开源框架,主要用来解决
分布式集群
中应用系统的一致性
犀牛_2046
·
2023-10-11 23:41
#
Zookeeper
大数据
Zookeeper基本原理
Zookeeper集群环境搭建
1.Zookeeper特性与节点数据类型详解
1.Zookeeper介绍ZooKeeper是一个开源的分布式协调框架,是ApacheHadoop的一个子项目,主要用来解决
分布式集群
中应用系统的一致性问题。
会code的厨子
·
2023-10-11 23:30
Zookeeper
java-zookeeper
zookeeper
java
Zookeeper学习笔记
主要用来解决
分布式集群
中应用系统的一致性问题,例如怎样避免同时操作同一数据造成
super_pcm
·
2023-10-11 22:50
springcloud----检索中间件 ElasticSearch 分布式场景的运用
如果对es的基础知识有不了解的可以看es看这个文章就会使用了1.
分布式集群
场景下的使用单机的elasticsearch做数据存储,必然面临两个问题:海量数据存储问题、单点故障问题。
蓝胖子不是胖子
·
2023-10-11 17:05
spring
cloud
中间件
elasticsearch
达梦数据库MPP搭建
一、相关概念:DM
分布式集群
概念:DMMPP大规模
分布式集群
,采用的完全对等无共享体系架构,结合了完全无共享体系的优点,在此基础上又前进了一步,不采用增加主控节点来协调所有并行处理的主从方式,而是各个节点完全对等
澎湃溜达水
·
2023-10-11 10:12
数据库
Docker Swarm
Swarm默认内置有加密的
分布式集群
存储、加密网络、公用TLS、安全集群接入令牌以及一套简化数字证书管理的PKI,用户可以自如地添加或删除节点。
马宁宁118
·
2023-10-10 22:38
rocketmq的安装及使用
概念模型:Producer:消息发布的角色,支持
分布式集群
方式部署。Producer通过MQ的负载均衡模块选择相应的Broker集群队列进行消息投递,投递的过程支持快速失败并且低延迟。
叫我11
·
2023-10-10 02:37
java
《黑马程序员》大数据集群(Hadoop生态)安装部署——图文讲解
HadoopHDFS提供分布式海量数据存储能力HadoopYARN提供
分布式集群
资源管理能力HadoopMapReduce提供分布式海量数据计算能力前置要求请确保完成了集群化环境前置准备章节的内容即:JDK
懒羊羊夸夸~
·
2023-10-10 02:41
hadoop
分布式
Spark完全
分布式集群
搭建
环境准备服务器集群我用的CentOS-6.6版本的4个虚拟机,主机名为hadoop01、hadoop02、hadoop03、hadoop04,另外我会使用hadoop用户搭建集群(生产环境中root用户不是可以任意使用的)spark安装包下载地址:https://mirrors.aliyun.com/apache/spark/我用的spark-2.2.0-bin-hadoop2.7.tgz要根据自
piziyang12138
·
2023-10-08 20:20
hadoop系列(二)常用配置、启动方式、HDFS,YARN配置文件
NowyouarereadytostartyourHadoopclusterinoneofthethreesupportedmodes:Local(Standalone)Mode–本地模式Pseudo-DistributedMode–伪
分布式集群
故山归梦远
·
2023-10-08 07:53
hadoop
hdfs
大数据
【kubernetes详解12】-安全认证
目录一、访问控制概述二、认证管理三、授权管理四、准入控制一、访问控制概述Kubernetes作为一个
分布式集群
的管理工具,保证集群的安全性是其一个重要的任务。
桂安俊@kylinOS
·
2023-10-07 23:52
Kubernetes
kubernetes
安全认证
授权管理
准入控制
Kubernetes 安全认证
访问控制概述Kubernetes作为一个
分布式集群
的管理工具,保证集群的安全性是其一个重要的任务。所谓的安全性就是保证对Kubernetes的各种客户端进行认证和鉴权操作。
傲傲娇
·
2023-10-07 23:21
k8s
java
kubernetes
RocketMQ-架构设计
RocketMQ-架构设计1技术架构image.pngRocketMQ架构上主要分为四部分,如上图所示:Producer:消息发布的角色,支持
分布式集群
方式部署。
疯狂撸代码的奋青骚年
·
2023-10-07 20:28
Zookeeper经典应用场景实战(二)
在
分布式集群
工作的开发场景中
Tacy0213
·
2023-10-07 19:50
ZK&Netty
zookeeper
分布式
云原生
ZooKeeper单机&伪
分布式集群
搭建实战
1.简介ZooKeeper是一个为分布式应用所设计的分布的、开源的协调服务,它主要是用来解决分布式应用中经常遇到的一些数据管理问题,简化分布式应用协调及其管理的难度,提供高性能的分布式服务。ZooKeeper本身可以以Standalone模式安装运行,不过它的长处在于通过分布式ZooKeeper集群(一个Leader,多个Follower),基于一定的策略来保证ZooKeeper集群的稳定性和可用
shunyang
·
2023-10-07 17:06
互联网Java工程师面试题·Memcached篇·第一弹
1.1.1作为数据库的前端缓存应用1.1.2作业集群的session会话共享存储2、Memcached服务
分布式集群
如何实现?3、Memcached服务特点及工作原理是什么?
时光の尘
·
2023-10-07 07:17
千题千解·Java面试宝典
java
开发语言
memcached
Hadoop
分布式集群
搭建教程(2023在校生踩坑版)
博主本人,数据科学与大数据技术双非民办本科在读生,学的很差,配置Hadoop过程中,遇到了好多好多坑,Linux操作系统使用还是比较熟练的,所以大部分遇到的问题都是因为课本上的知识已经更新换代,网上找到的教程也杂乱无章,并且如果按照网上的教程来,课本后面几章的内容不兼容会出现更多的bug....为此我整理了这篇博客,希望可以帮助到跟博主同样情况的同学们。同时希望大家可以点赞关注收藏支持一下T.T.
袁既望
·
2023-10-07 06:11
Hadoop学习历程
分布式
hadoop
大数据
【linux】CentOS8 Hadoop伪分布式环境搭建(三台节点机)
文章目录前言一、伪
分布式集群
分别是什么?二、安装Hadoop三、伪分布式环境搭建四、添加两个节点机五、启动hadoop前言1.本篇文章主要参考博客:点击进入,整合了伪分布的环境搭建和一些踩坑事项。
Sillyhumans
·
2023-10-07 06:41
linux
hadoop
分布式
linux
Hadoop 伪分布式环境搭建
1、hadoop集群环境搭建之伪
分布式集群
环境搭建(一)https://blog.csdn.net/qq_33689414/article/details/792231862、CentOS7常用命令https
qlzx921
·
2023-10-07 06:41
Hadoop伪分布式环境搭建
什么是Hadoop伪
分布式集群
?Hadoop伪
分布式集群
是一种在单个节点上模拟分布式环境的配置,用于学习、开发和测试Hadoop的功能和特性。
袁既望
·
2023-10-07 06:40
Hadoop学习历程
分布式
hadoop
大数据
小滴课堂-玩转新版高性能RabbitMQ容器化
分布式集群
实战-1
第一章架构师成长-高性能消息队列RabbitMQ课程介绍第1集架构成长-高性能消息队列RabbitMQ介绍简介:讲解高性能消息队列RabbitMQ适合人员和学后水平课程介绍从0到1讲解高性能消息队列RabbitMQ,急速入门Docker部署RabbitMQ,掌握RabbitMQ核心概念和多种工作模式,不止讲解MQ多个工作模式,如简单队列、工作队列(轮训+公平策略)、发布订阅、路由模式、主题模式等,
小滴课堂
·
2023-10-06 21:51
rabbitmq
java
docker
DLRover - 小记
它可以在
分布式集群
上自动训练深度学习模型。它帮助模型开发人员专注于模型结构,而不需要考虑任何工程方面的东西,比如硬件加速、分布式运行等。现在,它为K8s/Ray上
伊织code
·
2023-10-06 17:28
其他
DLRover
Zookeeper介绍及实战(一)
一、ZooKeeper介绍ZooKeeper是一个开源的分布式协调框架,是ApacheHadoop的一个子项目,主要用来解决
分布式集群
中应用系统的一致性问题。
30岁老阿姨
·
2023-10-06 12:28
zookeeper
java
分布式
Zookeeper特性与节点数据类型详解
2.1、Zookeeper安装2.2、客户端命令行操作2.3、GUI工具1、Zookeeper介绍 ZooKeeper是一个开源的分布式协调框架,是ApacheHadoop的一个子项目,主要用来解决
分布式集群
中应用系统的一致性问题
Tacy0213
·
2023-10-05 15:55
ZK&Netty
zookeeper
大数据的入门级学习详细路线,初学者必看!!
1.Linux基础和
分布式集群
技术学完此阶段可掌握的核心能力:熟练使用Linux,熟练安装Linux上的软件,了解熟悉负载均衡、高可靠等集群相关
金光闪闪耶
·
2023-10-05 06:59
腾讯云轻量应用服务器详细测评:性能、优势、性价比与优惠价格
公网带宽和系统盘存储多维对比,相对于CVM云服务器轻量服务器更适合轻量级的应用,轻量服务适合中小企或个人开发者用于搭建We网站b应用、小程序、APP以及开发测试环境等,云服务器CVM适用于高并发网站、复杂
分布式集群
应用
腮帮子疼
·
2023-10-04 15:27
腾讯云
腾讯云
云计算
互联网Java工程师面试题·Zookeeper 篇·第二弹
17.
分布式集群
中为什么会有Master?18.zk节点宕机如何处理?19.zookeeper负载均衡和nginx负载均衡区别20.Zookeeper有哪几种几种部署模式?
时光の尘
·
2023-10-04 08:33
千题千解·Java面试宝典
java-zookeeper
java
zookeeper
MQTT的学习之Mosquitto集群搭建
文章钢要:1、进行双服务器搭建2、进行多服务器搭建一、Mosquitto的
分布式集群
部署如果需要做并发量很大的时候就需要考虑做集群处理,但是我在查找资料的时候发现并不多,所以整理了一下,搭建简单的Mosquitto
街头小瘪三
·
2023-10-03 22:24
消息中间件
学习
服务器
运维
MongoDB使用中的一些问题
1、count统计结果错误这是由于
分布式集群
正在迁移数据,它导致count结果值错误,需要使用aggregatepipeline来得到正确统计结果,例如:db.collection.aggregate(
lc__________
·
2023-10-03 15:49
MongoDB
mongodb
kubernetes——安全认证
机制说明kubernetes作为一个
分布式集群
的管理工具,保证集群的安全性是一个重要的任务。APIserver是集群内部各个组件通信的中介,也是外部控制的入口。
呵~女人
·
2023-10-03 04:38
kubernetes
安全
java
Kubernetes 集群安全机制说明和认证
机制说明Kubernetes作为一个
分布式集群
的管理工具,保证集群的安全性是其一个重要的任务。APIServer是集群内部各个组件通信的中介,也是外部控制的入口。
富士康质检员张全蛋
·
2023-10-03 04:38
Kubernetes
安全
kubernetes
用软件分层说说LAXCUS集群操作系统
Laxcus是一个非常庞大和复杂的
分布式集群
操作系统,管理着巨量的服务器,这些服务器被网络连接起来,在Laxcus托管下运行,规模可以从几台到几十万台不等。
LAXCUS分布式操作系统
·
2023-10-01 15:19
架构设计
人工智能
大数据
云操作系统
人工智能
操作系统
memcache缓存服务器的搭建
memcache一、MemCache简介二、MemCache实现原理三、Memcache的工作流程四、nginx+php+memcache+mysql搭建五、memcache相关指令六、memcache
分布式集群
的搭建一
现实如此呀
·
2023-10-01 12:17
工具
分布式
数据库
memcached
缓存
Google的大规模集群管理系统Borg(上篇)
对容器化技术,自动化部署,
分布式集群
管理,资源调度,存储技术有较深的研究。
腾讯开发者
·
2023-09-30 07:25
云计算
容器
docker
谷歌
borg
Linux Ubuntu系统环境下hadoop的安装以及伪
分布式集群
安装与配置
1.环境安装条件1.1版本兼容问题本人在安装过程中遇到的很多问题是由版本不兼容导致的,安装完成后的版本:Ubuntu18.04.6VMwareWorkstation16VMtools-Tools-10.3.21hadoop-3.1.2jdk1.8.0_362windows11系统下安装vm15会出现蓝屏警告,安装vm17会出现vmwaretools下载完成后还是不能拖动共享文件的问题,可能是vmt
尚棹芸
·
2023-09-30 06:20
hadoop
linux
ubuntu
三主机安装Hadoop
1.主机:10.21.14.16410.21.14.16510.21.14.1662.版本:hadoop-2.7.7jdk>1.83.参考:Hadoop完全
分布式集群
搭建-4.安装:1.配置各台虚拟机之间免秘钥登录参考
soane1983
·
2023-09-29 11:43
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他