DFS

大数据技术之Hadoop（HDFS）

1.HDFS概述1.1HDFS产生背景和意义1.HDFS产生背景随着数据量越来越大，在一个操作系统存不下所有的数据，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，迫切需要一种系统来管理多台机器上的文件
江苏彭与晏·2023-11-30 10:23

大数据 - Hadoop - HDFS

Hadoop=HDFS（文件系统，数据存储技术相关）+Mapreduce（数据处理），Hadoop的数据来源可以是任何形式，在处理半结构化和非结构化数据上与关系型数据库相比有更好的性能，具有更灵活的处理能力
蒙蒙的林先生·2023-11-30 10:21

大数据Hadoop-HDFS_架构、读写流程

大数据Hadoop-HDFS基本系统架构HDFS架构包含三个部分：NameNode，DataNode，Client。NameNode：NameNode用于存储、生成文件系统的元数据。运行一个实例。
大沙头三马路·2023-11-30 09:48

大数据-hadoop-hdfs

Hadoop分布式文件系统(HDFS)是指被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统（DistributedFileSystem）。
像影子追着光梦游_·2023-11-30 09:48

大数据Hadoop-HDFS_元数据持久化

大数据Hadoop-HDFS_元数据持久化（1）在HDFS第一次格式化后，NameNode（即图中的主NameNode）就会生成fsimage和editslog两个文件；（2）备用NameNode（即图中的备
大沙头三马路·2023-11-30 09:14

letter-combinations-of-a-phone-number

"abc","def","ghi","jkl","mno","pqrs","tuv","wxyz"};vectorletterCombinations(stringdigits){vectorans;dfs
DaiMorph·2023-11-30 09:51

【物联网与大数据应用】Hadoop数据处理

Hadoop利用分而治之的思想为大数据提供了一整套解决方案，如分布式文件系统HDFS、分布式计算框架MapReduce、NoSQL数据库HBase、数据仓库工具Hive等。
Bosenya12·2023-11-30 09:06

力扣打卡 1457-二叉树中的伪回文路径

Problem:1457.二叉树中的伪回文路径思路首先想用最暴力的深度优先DFS，使用traversePaths方法来遍历二叉树并存储所有路径。该方法接收当前节点、当前路径和路径列表作为参数。
BobW7·2023-11-30 09:04

Map和Reduce在Hadoop与Python中有何异同？

Hadoop作为一个分布式系统，可以将不同的机器设备连接起来进行存储，也就是人们常说的HDFS，这也是Hadoop的一个构成部分；而hadoop的另一个构成部分就是MapReduce了，前者负责数据的存储
值得一看的喵·2023-11-30 09:25

旅行商问题（枚举，回溯，动态规划，贪心，分支界限）

暴力枚举使用dfs枚举每一个点
ˇasushiro·2023-11-30 07:46

蓝桥杯-正则问题（dfs，解决()的计算）

历届试题正则问题时间限制：1.0s内存限制：256.0MB问题描述考虑一种简单的正则表达式：只由x()|组成的正则表达式。小明想求出这个正则表达式能接受的最长字符串的长度。例如((xx|xxx)x|(x|xx))xx能接受的最长字符串是：xxxxxx，长度是6。输入格式一个由x()|组成的正则表达式。输入长度不超过100，保证合法。输出格式这个正则表达式能接受的最长字符串的长度。样例输入((xx|
weixin_30266885·2023-11-30 07:05

蓝桥杯 正则问题

实现：1#include2usingnamespacestd;3strings;intp=0;4intdfs()5{6intans=0,t=0;7while(true)8{9if(s[p]=='('){
weixin_30346033·2023-11-30 07:05

蓝桥杯 正则问题(dfs)

1607:正则问题时间限制:1Sec内存限制:256MB提交:34解决:13[提交][状态][讨论版]题目描述考虑一种简单的正则表达式：只由x()|组成的正则表达式。小明想求出这个正则表达式能接受的最长字符串的长度。例如((xx|xxx)x|(x|xx))xx能接受的最长字符串是：xxxxxx，长度是6。输入一个由x()|组成的正则表达式。输入长度不超过100，保证合法。输出这个正则表达式能接受的
weixin_30500105·2023-11-30 07:05

第八届 蓝桥杯 7、正则问题 dfs

描述：正则问题考虑一种简单的正则表达式：只由x()|组成的正则表达式。小明想求出这个正则表达式能接受的最长字符串的长度。例如((xx|xxx)x|(x|xx))xx能接受的最长字符串是：xxxxxx，长度是6。输入----一个由x()|组成的正则表达式。输入长度不超过100，保证合法。输出----这个正则表达式能接受的最长字符串的长度。例如，输入：((xx|xxx)x|(x|xx))xx程序应该输
dieshilv9435·2023-11-30 07:28

蓝桥杯 正则问题(DFS的运用)

问题描述考虑一种简单的正则表达式：只由x()|组成的正则表达式。小明想求出这个正则表达式能接受的最长字符串的长度。例如((xx|xxx)x|(x|xx))xx能接受的最长字符串是：xxxxxx，长度是6。输入格式一个由x()|组成的正则表达式。输入长度不超过100，保证合法。输出格式这个正则表达式能接受的最长字符串的长度。样例输入((xx|xxx)x|(x|xx))xx样例输出6解题思路：本题是对
sanctuary_wu·2023-11-30 07:28

蓝桥杯 正则匹配

那么我们将每一个()封装用dfs处理，|左右再进行比较即可。细节见代码。
_Rikka_·2023-11-30 07:58

P8650 [蓝桥杯 2017 省 A] 正则问题(dfs )

多重括号，利用回溯来对上一层括号中的内容进行反馈实现：若为x长度加一若为（进入递归计算(计算相当于子表达式)若为）结束当前递归若为|计算递归，并与当前长度进行比较#include#includeusingnamespacestd;intdec1();intmain(){printf("%d",dec1());return0;}intdec1(){charch;intlen=0;while(cin>
%d%d2·2023-11-30 07:53

Hadoop入门学习笔记-第六天（hive数据库命令相关操作）

hive命令行操作/user/hive/warehouse（hdfs目录）)说明：hive创建的数据库和数据库表都存在hdfs,一般默认目录为：/user/hive/warehouse1…创建hive的数据库
渣男程序员007·2023-11-30 05:44

Hadoop入门学习笔记-第四天（wordCount实例代码编写笔记）

文件中引入以下jar包org.apache.hadoophadoop-client2.7.3org.apache.hadoophadoop-common2.7.3org.apache.hadoophadoop-hdfs2.7.3org.apache.hadoophadoop-client2.7.33
渣男程序员007·2023-11-30 05:43

Hadoop入门学习笔记-第二天 （HDFS：NodeName高可用集群配置）

说明：hdfs：nn单点故障，压力过大，内存受限，扩展受阻。hdfsha：主备切换方式解决单点故障hdfsFederation联邦：解决鸭梨过大。
渣男程序员007·2023-11-30 05:13

Hadoop入门学习笔记-第三天（Yarn高可用集群配置及计算案例）

什么是mapreduce首先让我们来重温一下hadoop的四大组件：HDFS：分布式存储系统MapReduce：分布式计算系统YARN：hadoop的资源调度系统Common：以上三大组件的底层支撑组件
渣男程序员007·2023-11-30 05:13

Linux根目录作用

目录作用bin二进制可执行文件boot内核和系统启动文件dev设备文件etc系统配置文件home主目录initrd启动时挂载的initrid映像lib各种共享库文件lost+foundfsck放置的零散文件
aabbcco_·2023-11-30 04:39

【Spark】on yarn集群模式安装部署

官方文档http://spark.apache.org/docs/latest/running-on-yarn.html前提安装启动Hadoop(需要使用HDFS和YARN)安装单机版Spark不需要集群
没去过埃及的法老·2023-11-30 03:23

Spark on YARN的部署

SparkonYARN的原理就是依靠yarn来调度Spark，比默认的Spark运行模式性能要好的多，前提是首先部署好hadoopHDFS并且运行在yarn上，然后就可以开始部署sparkonyarn了
GoodInSun·2023-11-30 03:23

ambari运维问题记录

ambari综合问题记录1、hdfs无法启动错误：2018-04-2514:36:09,293-Retryingafter10seconds.Reason:Executionof'/usr/hdp/current
人生匆匆·2023-11-30 03:23

【Ambari】HDFS基于Ambari的常规运维

目录一、简介1.1Ambari介绍1.2关于本手册二、综合运维2.1Ambari一览2.1.1命令行操作2.1.2登入和登出2.1.3.管理界面首页三、服务的管理和运维3.1HDFS运维3.1启动/停止
阿龙先生啊·2023-11-30 03:52

数据结构 -- 并查集与图

寻找根节点3.是否为同一集合4.求集合个数5.合并为同一集合中整体代码2.图1.基本知识1.各个属性2.特殊名词3.图的解释2.图的表示1.邻接矩阵2.邻接表3.图的遍历1.BFS--广度优先遍历2.DFS
哈里沃克·2023-11-30 02:23

bartender的安全策略不允许指定的用户执行此操作_如何在CentOS7上安装最新的MongoDB并不踩坑...

昨天在头条发的《请不要再无条件推荐Nginx-gridfs插件访问MongoDB》就是我踩的坑之一，为了让大家少踩坑，整理这份安装文档给大家使用，节省大家宝贵时间。话不多说，开整！
weixin_39605326·2023-11-30 02:41

Spark完全分布式搭建（On Yarn）

目录一、集群规划二、配置Spark路径三、修改配置文件1.spark-env.sh2.修改slaves文件四、启动集群1.先起动Hadoop的HDFS和Yarn2.启动Spark五、Web查看集群启动情况六
Congee小周·2023-11-30 02:00

Docker 安装 FastDFS

简述FastDFS是一个开源的轻量级分布式文件系统，它的主要功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。
虹猫日志·2023-11-29 23:50

传智杯-题目1

都进行枚举，进行递归操作二：如果位数到了指定的n的时候，递归的条件，进行判断是否可以整除操作#include#includeusingnamespacestd;longlongn,k,ans;voiddfs
一直爱莲子·2023-11-29 22:23

PAT-10道题

都进行枚举，进行递归操作二：如果位数到了指定的n的时候，递归的条件，进行判断是否可以整除操作#include#includeusingnamespacestd;longlongn,k,ans;voiddfs
一直爱莲子·2023-11-29 22:47

拓扑排序-LeetCode210.课程表II

通过这道题目我们了解一下拓扑排序的两种实现方式-（dfs&bfs）（解本题的基本思路就是将已知条件转换为图的数据结构，意识到所求结果就是图中的拓扑序列，通过拓扑排序进行寻找。）
不要脱发的小王·2023-11-29 21:45

LeetCode 210. 课程表 II（拓扑排序）

→1，2每个课程都有三种状态：0还没被搜索到，1正在搜索中，2已经搜索完成，放在最终排序中解题过程可以分解为：1、把每个课程的依赖关系列出来2、然后开始以此遍历没有搜索到的课程3、没有搜索到课程，进行dfs
peachzy·2023-11-29 21:13

【解决】HDFS JournalNode启动慢问题排查

文章目录一.问题描述二.问题分析1.排查机器性能2.DNS的问题三.问题解决1.修复DNS服务2.添加主机映射为0.0.0.03.修改hadoop源码一句话：因为dns的问题导致journalnode启动时很慢，通过修复dns对0.0.0.0域名解析，修复此问题。一.问题描述从journalnode启动到服务可用，完成RPCListen，需要花费大概1分多钟的问题，而这不符合安装预期。二.问题分析
roman_日积跬步-终至千里·2023-11-29 20:12

【LeetCode】每日一题 2023_11_25 二叉树中的伪回文路径（dfs，数组/位运算）

二叉树中的伪回文路径题目链接：1457.二叉树中的伪回文路径题目描述代码与解题思路funcpseudoPalindromicPaths(root*TreeNode)(ansint){cnt:=make([]int,10)dfs
戊子仲秋·2023-11-29 20:41

大数据技术之HBase

①HBase是以hdfs为数据存储，一个面向
Red-P·2023-11-29 20:57

大数据之HBase

HBase介绍Apache的三篇论文，GFS谷歌文件系统->HDFS；MR->MR;BigTable->HBase;HBase是hadoop数据库，一种分布式、可扩展的大数据NoSQL数据库之一。
十七✧ᐦ̤·2023-11-29 20:55

二叉树中的伪回文路径（DFS C++ && Java）

目录1457.二叉树中的伪回文路径题目描述：原理思路：1457.二叉树中的伪回文路径题目描述：给你一棵二叉树，每个节点的值为1到9。我们称二叉树中的一条路径是「伪回文」的，当它满足：路径经过的所有节点值的排列中，存在一个回文序列。请你返回从根到叶子节点的所有路径中伪回文路径的数目。示例1：输入：root=[2,3,1,3,1,null,1]输出：2解释：上图为给定的二叉树。总共有3条从根到叶子的路
Cosmoshhhyyy·2023-11-29 20:15

图的遍历（无向数组版）

与之前的dfs不同，单纯地遍历该图不需要找到最短路，也就不需要恢复标记用数组保存图，数组中1表示可以连通，max表示不能，0表示本身dfs：book[1]=1;//这一步很重要，否则会发生循环voiddfs
laochonger·2023-11-29 19:50

如何能打进去idea引入外部jar包

org.apache.maven.pluginsmaven-war-plugin3.2.3${project.basedir}/libWEB-INF/lib/**/*.jar然后导入依赖即可comhadoop-hdfs-client2.7
一个正在努力的小白码农·2023-11-29 19:57

蓝桥杯每日一题2023.11.28

“祥”一定不为0（有前导0就不能算为4位数）使用搜索时将其特判#includeusingnamespacestd;constintN=10;inta[N];boolv[N];voiddfs(intdep
Akct·2023-11-29 18:30

HBase初识之学生心得总结

c、HBase：理解为Hadoopbase--3.大数据框架：a、数据的存储：hdfs/hive/hbaseb、数据的传输：flume/sqoopc、数据的计算
程序员驴子酱·2023-11-29 15:33

第八章(上)　贪心策略与动态规划

动态规划和贪心算法都属于递推算法，但是与ｄｆｓ求解的个数或者是全部解不同的是，他们俩是用来求最优解，且都是用局部最优来推导全局最优解，是对遍历解空间的一种优化。
陈一Kristian·2023-11-29 14:48

fastDFS部署测试

fastDFS部署测试前提：服务器安装有docker服务器无法正常访问内网将对应的镜像文件复制到服务器上进入镜像文件的目录下，进行docker导入镜像dockerloaddfs-nginx.tar
我从凡间来，到此觅长生·2023-11-29 14:35

fastdfs部署详解

文章目录环境说明一、环境配置获取软件包二、部署部署libfastcommon-1.0.43部署fastdfs-5.04创建存储文件目录拷贝配置文件修改配置文件启动检验上传三、添加nginx显示配置fastdfs-nginx-module
(～￣▽￣)～凤凰涅槃·2023-11-29 14:31

fastdfs部署

文章目录前言一、说明二、部署1.准备2.依赖环境3.开始4.配置storage5.配置tracker6.配置fastdfs-nginx-module7.nginx配置总结前言因为近期公司fastdfs集群要加
咸鱼派大星·2023-11-29 14:00

FastDFS 部署

使用FastDFS搭建图片服务器（单实例）一、背景描述之前公司的图片服务器已经不能胜任了（直接使用tomcat），需要重新搭建图片服务器，这两天研究了下FastDFS，感觉挺好用记录下来以供日后参考。
点滴Java·2023-11-29 14:59

fastdfs 部署使用

一、手工在Centos7上面部署fastdfs使用FastDfscentos7下的FastDFS5_09的安装与使用xkevin提供教程用FastDFS一步步搭建文件管理系统xRedisInstallStep
Dazer007·2023-11-29 14:58

FastDFS部署

简介FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。
一码归一码@·2023-11-29 14:54
上一页 65 66 67 68 69 70 71 72 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他