filesystem】第4页

hdfs原理

简介HDFS（HadoopDistributedFileSystem）Hadoop分布式文件系统。是根据google发表的论文翻版的。

raining_time·2025-03-31 06:38

文件删除后仍然被进程占用导致分区占满

[email protected][/root]#df-h|head-n20FilesystemSizeUsedAvailUse%Mountedond

公博义·2025-03-30 11:03

C++中获取文件名的后缀

在C++中获取文件名的后缀可以通过以下两种方法实现：方法一：使用C++17的std::filesystem库（推荐）#include#includenamespacefs=std::filesystem

一只小小汤圆·2025-03-29 12:28

Ubuntu20.04调整swap分区大小笔记

//blog.csdn.net/sunyuhua_keyboard/article/details/142485764第一步禁用swap$cat/etc/fstab#/etc/fstab:staticfilesysteminformation

跃龙客·2025-03-28 19:55

df 命令使用说明

目录1、查看所有挂载文件系统的磁盘使用情况2、查看指定路径所在文件系统的磁盘使用情况3、以指定的单位来查看磁盘使用情况5、查看磁盘使用请情况时，自定义输出列df可以理解为“DiskFilesystem”

一只小爪子·2025-03-28 19:55

酷爱码·2025-03-28 13:12

《Operating System Concepts》阅读笔记：p483-p488

一、技术总结1.objectstorage(1)objectstorage管理软件Hadoopfilesystem(HDFS)、Ceph。

·2025-03-27 10:34

K8S-集群添加worker节点脚本

export了那就先停止docker:1、systemctlrestartdocker2、systemctlstopdockersystemctlstatusdocker4、执行下面的查看磁盘使用情况#df-hFilesystemSizeUsedAvailUse

卡亦克·2025-03-26 13:20

java NIO中的FileSystems工具类可以读取本地文件系统，ZIP/JAR等，无需解压处理，还可以复制文件

在JavaNIO（java.nio.file包）中，FileSystems是一个工具类，用于操作和管理文件系统。它提供了静态方法来获取或创建文件系统实例，并支持自定义文件系统实现。

爱的叹息·2025-03-21 11:05

【服务器数据恢复】数据中心存储服务器VMware vSAN分布式存储架构数据恢复解析

分布式文件系统（DistributedFileSystem，DFS）是一种能够在多台计算机之间共

海境超备·2025-03-21 08:40

服务器使用宝塔上传文件时卡住了的解决办法

这时我们来看宝塔面板首页的磁盘空间，一般会看到它是红色的，接近100%，这时我们就需要清理掉服务器中不必要的文件（比如日志、缓存等）我们也可以通过命令来查看磁盘的使用情况：通过SSH登录服务器df-h输出示例FilesystemSizeUsedAvailUse

Frozen-tzy·2025-03-20 20:33

How Spark Read Sftp Files from Hadoop SFTP FileSystem

GradleDependenciesimplementation('org.apache.spark:spark-sql_2.13:3.5.3'){excludegroup:"org.apache.logging.log4j",module:"log4j-slf4j2-impl"}implementation('org.apache.hadoop:hadoop-common:3.3.4'){exc

IT•轩辕·2025-03-19 13:18

DeepSeek 3FS 与 JuiceFS：架构与特性比较

近期，DeepSeek开源了其文件系统Fire-FlyerFileSystem(3FS)，使得文件系统这一有着70多年历时的“古老”的技术，又获得了各方的关注。

·2025-03-18 18:07

Fatal Python error: initfsencoding: unable to load the file system codec

FatalPythonerror:initfsencoding:unabletoloadthefilesystemcodecModuleNotFoundError:Nomodulenamed'encodings'Currentthread0x00007668

珞珈山小裁缝11-8·2025-03-16 00:51

VSCode SSHFS 扩展使用教程

VSCodeSSHFS扩展使用教程vscode-sshfsExtensionforVisualStudioCode:FilesystemproviderusingSSH项目地址:https://gitcode.com

史跃骏Erika·2025-03-15 00:57

用C++代码利用std::filesystem库写入一个文件路径到数据库中

使用C++代码写数据库不是什么麻烦事，但是和成熟的JAVA体系不一样，C++没有那么多成熟的数据库操作，比如mybatis等等。而且C++一般来说也不会用于写业务软件，不会用比较重的三方库。所以有时用C++代码来直接操作数据库，碰到的一个问题是：在一张数据库表中定义了一个字段：filePathvarchar2(100)需求是将一个形如：c:\test\test.log这样的文件名写入到该字段。本来

新兴AI民工·2025-03-14 09:54

Android soong/ui/build/finder.go FindSources源码分析

//FindSourcessearchesforsourcefilesknowntoandwritesthemtothefilesystemfor//uselater.

月盈五·2025-03-12 23:24

Hadoop、Spark和 Hive 的详细关系

核心组件：HDFS(HadoopDistributedFileSystem)：分布式文件系统，提供高吞吐量的数据访问。

夜行容忍·2025-03-11 18:46

Excel 后缀竟成 “拦路虎”？POI 读取报错原因大揭秘

POI读取excel报错由于有时候上传的是xls文件有时候上传的是xlsx文件，使用POIFSFileSystem来读取文件POIFSFileSystempoifsFileSystem;try{poifsFileSystem

·2025-03-11 11:16

qt中常见的类

QObject├──QCoreApplication│├──QGuiApplication││└──QApplication│││├──QTimer│├──QThread│├──QEventLoop│└──QFileSystemWatcher

kamisama_zhu·2025-03-10 07:50

LINUX本地磁盘DISK空间扩容

1.磁盘空间现状df显示/总大小50G[root@glodendb~]#df-hFilesystemSizeUsedAvailUse%Mountedon/dev/mapper/rhel-root45G18

数据库急诊日记·2025-03-09 21:32

Hadoop介绍：什么是Hadoop？了解Hadoop的应用

Hadoop框架主要包括HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）、MapReduce、YA

Zzzxt007·2025-03-09 21:55

鸿蒙系统分布式文件概述、访问、拷贝

1.分布式文件系统概述分布式文件系统（hmdfs，HarmonyOSDistributedFileSystem）提供跨设备的文件访问能力，适用于如下场景：两台设备组网，用户可以利用一台设备上的编辑软件编辑另外一台设备上的文档

小时代的大玩家·2025-03-08 09:20

【Linux系统编程】初识系统编程

系统编程的应用领域4.系统编程的核心概念5.系统编程的工具和技术二、操作系统四大基本功能1.进程管理（ProcessManagement）2.内存管理（MemoryManagement）3.文件系统管理（FileSystemManagement

不被定义的~wolf·2025-03-08 06:51

RMAN备份bug-审计日志暴涨(select action from gv$session)

经过检查是审计日志过大,/oracle目录197G审计日志占用70G，每6个小时产生大量审计日志，日志内容全是'selectactionfromgv$session'，猜测可能跟备份有关，$>df-h/oracleFilesystemSizeUsedAvailUse

CodeBe@r·2025-03-07 14:49

去中心化存储的新纪元：Python与IPFS的完美结合

本文将围绕Python与IPFS（InterPlanetaryFileSystem）的结合，探讨如何构建高效的去中心化存储解决方案。为什么选择去中心

Echo_Wish·2025-03-07 05:01

第五章 nfs服务器

NFS（NetworkFileSystem，网络文件系统）是FreeBSD支持的文件系统中的一种，它允许网络中的计算机（不同的计算机、不同的操作系统）之间通过TCP/IP网络共享资源，主要在unix系列操作系统上使用

Chen_l916·2025-03-07 01:50

hdfs HA 机制，一台 namenode 宕机了， joualnode ， namenode ， edit.log fsimage 的变化？思维导图代码示例（java 架构)

HDFS（HadoopDistributedFileSystem）的高可用性（HA,HighAvailability）机制旨在解决单点故障问题，确保即使在NameNode出现故障的情况下，文件系统仍然可以继续正常工作

用心去追梦·2025-03-06 10:00

hadoop

Hadoop是一个用于分布式存储和处理大规模数据的开源框架，它的架构主要由以下几个核心组件组成：1.Hadoop生态系统核心组件Hadoop的核心架构主要包括HDFS（HadoopDistributedFileSystem

百里自来卷·2025-03-06 06:00

【自学笔记】Hadoop基础知识点总览-持续更新

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录Hadoop基础知识点总览1.Hadoop简介2.Hadoop生态系统3.HDFS（HadoopDistributedFileSystem

Long_poem·2025-03-05 22:24

NFS配置全解析：让文件共享变得如此简单

无论是企业内部的文件共享，还是分布式系统中的数据存储，NFS（NetworkFileSystem）都是一种高效、可靠的解决方案。本文将带你从零开始，掌握NFS的安装、配置、优化等操作方法。

IT成长日记·2025-03-04 23:44

网络文件共享-nfs

NFS（NetworkFileSystem）是一种网络文件共享协议，允许客户端计算机通过网络（如局域网或互联网）访问并操作远程服务器上的文件和目录，就像这些文件存储在本地的磁盘上一样。

运维实习生~·2025-03-04 13:54

文件系统、关系型数据库、NoSQL 和数据湖

1.文件系统文件系统（FileSystem）是一种将数据按文件形式进行存储和管理的技术。在文件系统中，数据以文件的形式组

晴天彩虹雨·2025-03-04 12:46

Kubernetes容器编排的简单介绍

InthebeginningtherewastheFreeBSD-andlaterLinux-chrootjail.Chrootwasawaytobringanunmountedfilesystemtolifesoyoucouldexecutecommandsasthoughitwasactuallyrunningonitsownhost.ThencametheLinuxContainerspro

cumi6497·2025-03-02 13:04

LeetCode //C - 609. Find Duplicate File in System

,includingthedirectorypath,andallthefileswithcontentsinthisdirectory,returnalltheduplicatefilesinthefilesystemintermsoftheirpaths.Youmayretur

Navigator_Z·2025-03-02 11:51

Linux查看磁盘命令df-h详解

执行df-h命令后，将会显示如下输出：FilesystemSizeUsedAvailUse%Mountedon/dev/sda120G10G10G50%/tmpfs2.0G02.0G0%/dev/s

小毛驴850·2025-02-28 06:13

FUSE，从内核到用户态文件系统的设计之路

FUSE（FilesysteminUserspace）是一个允许用户在用户态创建自定义文件系统的接口，诞生于2001年。

·2025-02-27 17:14

HDFS是如何存储和管理大数据

HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）是专为大数据处理而设计的分布式文件系统，具有高吞吐量、高容错性等特点，适用于大规模数据存储和管理。

python资深爱好者·2025-02-26 11:38

【PlatformIO】基于Arduino的ESP32 SPIFFS文件系统操作

文章目录概要程序代码视频概要SPIFFS文件系统的全称是SerialPeripheralInterfaceFlashFileSystem‌它是一种专为嵌入式系统设计的轻量级文件系统，主要用于管理SPINORFlash

水手勇敢·2025-02-25 15:15

Node.js 文件操作教程

Node.js文件操作教程1.文件系统模块介绍Node.js提供了fs（FileSystem）模块来处理文件操作。这是一个内置模块，不需要额外安装。

神秘代码行者·2025-02-25 05:41

二、QEMU NFS 环境搭建

为了进一步提高开发效率，我们可以使用NFS（NetworkFileSystem）来挂载根目录。

jiuri_1215·2025-02-23 21:50

OceanBase 初探学习历程之二——操作系统参数最佳实践

1、磁盘配置[root@ob2~]#cat/etc/fstab##/etc/fstab#CreatedbyanacondaonThuAug1809:03:092022##Accessiblefilesystems

羽书飞影·2025-02-23 19:09

HDFS分布文件系统（Hadoop Distributed File System）

HDFS4.查看文件5.删除HDFS上的文件或者目录6.修改指定文件的权限信息（读、写、执行）一般语法：chmod[可选项]五、HDFS实战应用六、总结一.HDFS的本质HadoopDistributedFileSystem

柿子小头·2025-02-21 08:38

Rook-ceph(1.92最新版)

安装前准备#确认安装lvm2yuminstalllvm2-y#启用rbd模块modproberbdcat>/etc/rc.sysinit/etc/sysconfig/modules/rbd.modulesfilesystem.yaml

野猪佩挤·2025-02-20 01:32

Linux 磁盘满了怎么办？快速排查和清理方法

输出示例：plaintext复制FilesystemSizeUsedAvailUse%Mo

网硕互联的小客服·2025-02-18 19:30

webpack 项目优化（一）

:path.resolve(__dirname,'src'),//限定处理范围use:'babel-loader'}]}利用缓存Webpack5+内置持久化缓存（直接配置）：cache:{type:'filesystem

霹雳桃·2025-02-18 09:09

QtCreator 模块/视图编程( 一）模型类，自定义模型QStringListModel,QStandardItemModel,QFileSystemModel,QSqlQueryModel,

Qt提供的现成模型：QStringListModel:用来存储一个简单的QString项目列表QStandardItemModel:管理复杂的树型结构数据项，每一个数据项可以包含任意数据QFileSystemModel

psujtfc·2025-02-18 07:52

Node.js 中的 fs 模块详解

fs（FileSystem）模块是Node.js的核心模块之一，用于处理文件系统的操作，包括文件的读取、写入、删除、重命名等。它提供了同步和异步两种操作方式，适用于不同的场景。

小灰灰学编程·2025-02-17 08:30

Hadoop 的分布式缓存机制是如何实现的？如何在大规模集群中优化缓存性能？

分布式缓存的工作原理文件上传：用户将需要缓存的文件上传到HDFS（HadoopDistributedFileSystem）。文件路径可以在作业配置中指定。

晚夜微雨问海棠呀·2025-02-16 11:53

【Linux】玩转Linux操作系统（七）磁盘管理

[root~]#df-hFilesystemSizeUsedAvailUse%Mountedon/dev/vda140G5.0G33G14%/devtmpfs486M0486M0%/devtmpfs497M0497M0%

寒山独见君~·2025-02-15 22:47

推荐频道

filesystem】