E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ClickHouse
【课程笔记】华为 HCIA-Big Data 大数据 总结
目录HDFS分布式文件系统ZooKeeper分布式应用程序协调服务HBase非关系型分布式数据库Hive分布式数据仓库
ClickHouse
列式数据库管理系统MapReduce分布式计算框架Yarn资源管理调度器
淵_ken
·
2025-04-29 22:12
华为
HCIA-Big
Data
大数据
大数据
Doris 与
ClickHouse
在业务中的隐藏陷阱:那些官方文档没告诉你的细节
Doris和
ClickHouse
聚合操作在业务不同阶段的对比与实践在大数据分析领域,Doris和
ClickHouse
都是非常受欢迎的MPP数据库,它们在聚合操作上的设计理念和实现方式各有特点。
布拉德·甘·拉敎
·
2025-04-27 04:22
clickhouse
数据库
Doris
ClickHouse
数据导入和导出
ClickHouse
数据导入和导出
ClickHouse
是一个高性能、列式存储的分布式数据库,广泛应用于实时数据分析、大数据处理等场景。
~奔跑的简默~
·
2025-04-22 20:55
ClickHouse系列
clickhouse
数据库
大数据
Clichouse数据导出导入(数据迁移)
背景:因为
clickhouse
数据持续增加,导致服务器磁盘不够使用,云服务器的系统盘不能扩容,所以只能进行迁移连接
clickhouse
查看要迁移那些数据库root@jcdata:~/buckup/
clickhouse
运维老司机
·
2025-04-22 20:54
Linux
clickhouse
数据库
clickhouse
ClickHouse
核心架构设计
列式存储原理与数据压缩列式存储原理列式存储vs行式存储特性行式存储(如MySQL)列式存储(
ClickHouse
)数据排列按行连续存储(所有字段相邻)按列连续存储(单列数据紧密排列)适用场景OLTP:频繁单行读写
Aurora_NeAr
·
2025-04-22 20:51
clickhouse
AI工具类总结(二),门槛低,简单易上手!
Chat2DB:AI驱动的数据库工具和SQL客户端,最热门的GUI客户端,支持MySQL、Oracle、PostgreSQL、DB2、SQLServer、DB2、SQLite、H2、
ClickHouse
踢足球的,程序猿
·
2025-04-22 18:13
人工智能
ClickHouse
简介
OLAP与
ClickHouse
的定位OLAP的核心概念OLTP:服务于高并发、低延迟的短事务操作(如银行转账、订单支付),强调数据的增删改查(CRUD)和事务一致性(ACID)。
Aurora_NeAr
·
2025-04-21 04:27
clickhouse
海量聊天数据处理:基于Spring Boot与SharingJDBC的分库分表策略及
ClickHouse
冷热数据分离
本文将探讨如何使用SharingJDBC整合SpringBoot技术来实现合理的分库分表策略,并结合大数据同步工具将数据存储至
ClickHouse
中进行冷热数据分离。
南客先生
·
2025-04-20 10:02
SpringBoot
SharingJDBC
分库分表
MySQL
ClickHouse
大数据处理
中间件--
ClickHouse
-11--部署示例(Linux宿主机部署,Docker容器部署)
一、Linux宿主机部署1、环境准备操作系统:推荐使用CentOS7/8或Ubuntu18.04/20.04。硬件要求:至少2核CPU和4GB内存。足够的磁盘空间(根据数据量评估)。CPU需支持SSE4.2指令集(可通过以下命令检查):bash示例:grep-qsse4_2/proc/cpuinfo&&echo“SSE4.2supported”||echo“SSE4.2notsupported”网
weisian151
·
2025-04-19 22:38
中间件
中间件
clickhouse
linux
Clickhouse
配置参考
Clickhouse
配置参考适用版本21.3.9.84config.xml配置/data/
clickhouse
/
clickhouse
-server/access/trace/data/
clickhouse
D愿你归来仍是少年
·
2025-04-19 16:59
clickhouse
大数据
阿里云CentOs
ClickHouse
安装
作者主页:青花锁简介:Java领域优质创作者、Java微服务架构公号作者简历模板、学习资料、面试题库、技术互助文末获取联系方式
ClickHouse
安装目录前言1、检查服务器上
clickhouse
情况2、
青花锁
·
2025-04-18 08:02
项目实战
Java微服务
阿里云
centos
clickhouse
linux
linux脚本
shell
大数据面试问答-HBase/
ClickHouse
1.HBase1.1概念HBase是构建在HadoopHDFS之上的分布式NoSQL数据库,采用列式存储模型,支持海量数据的实时读写和随机访问。适用于高吞吐、低延迟的场景,如实时日志处理、在线交易等。RowKey(行键)定义:表中每行数据的唯一标识,类似于关系数据库的主键。特点:数据按RowKey的字典序全局排序。所有查询必须基于RowKey或范围扫描(Scan)。示例:user_123_orde
孟意昶
·
2025-04-18 03:00
数据开发面试经验记录
大数据
面试
hbase
clickhouse
数据库parts无法合并问题
现象:升级
clickhouse
版本后,出现如下报错,该报错一般出现于数据高速写入时,merge的速度赶不上part产生的速度,导致part数量堆积过多。
@斯坦索姆
·
2025-04-18 00:11
数据库
clickhouse
clickhouse
踩坑:报错 timeout distributed_ddl_task_timeout
今天使用
clickhouse
执行一个SQL语句时报错:Code:159.DB::Exception:Receivedfromlocalhost:9000.DB::Exception:Watchingtask
weixin_39210914
·
2025-04-18 00:41
clikhouse
数据库
sql
clickhouse
clickhouse
踩过的坑-----建表建库on cluster命令使用超时(code:159)distributed_ddl_task_timeout (=180) seconds
建库建表语句createdatabasetestoncluster
clickhouse
_cluster;报错信息↘Progress:0.00rows,0.00B(0.00rows/s.,0.00B/s.
Smile to everyday
·
2025-04-18 00:10
clickhouse
【赵渝强老师】TiDB的列存引擎:TiFlash
TiDB的TiFlash提供列式存储,且拥有借助
ClickHouse
高效实现的协处理器层。除此以外,它与TiKV非常类似,依赖同样的Multi-Raft体系,以Region为单位进行数据复制和分散。
·
2025-04-16 15:28
数据库tidbmysql
clickhouse
中常用的几个函数
neighbor获取某一列前后相邻的数据,第二个参数控制前后相邻的距离SELECTa,neighbor(a,-1)from(SELECTarrayJoin([1,2,
闲不住的程序员
·
2025-04-16 08:16
大数据
clickhouse
java
数据库
clickhouse
中的窗口函数
窗口函数边界核心参数窗口边界通过ROWS、RANGE或GROUPS模式定义,语法为:ROWSBETWEENAND基于物理行位置定义窗口,与排序键的实际值无关,适用于精确控制窗口行数–或RANGEBETWEENAND基于排序键的数值范围定义窗口,适用于时间序列或连续数值的场景(如日期、金额)。–或GROUPSBETWEENAND基于排序键的分组定义窗口,适用于重复值较多的场景(如按类别分组统计)##
闲不住的程序员
·
2025-04-16 08:16
大数据
clickhouse
数据库
面向OLAP的列式存储DBMS-1-[
ClickHouse
]的发展历程
文章目录1背景1.1Hadoop生态1.2OLAP概述1.2.1数据立方体的常见操作1.2.2OLAP架构分类1.2.3OLAP实现技术的演进1.3
ClickHouse
的性能2
ClickHouse
的功能特性
皮皮冰燃
·
2025-04-14 13:39
ClickHouse
clickhouse
中间件--
ClickHouse
-2--OLAP和OLTP
OLAP(OnlineAnalyticalProcessing,联机分析处理)和OLTP(OnlineTransactionProcessing,联机事务处理)是两种不同类型的数据处理系统,它们分别针对不同的应用场景和需求。1、OLTP(OnlineTransactionProcessing,联机事务处理)定义:OLTP是指用于执行和支持日常业务活动的系统。这些系统需要能够快速地处理大量短小、原子
weisian151
·
2025-04-14 13:37
中间件
中间件
clickhouse
ClickHouse
中出现 DB::Exception: Too many parts 错误
在
ClickHouse
中出现DB::Exception:Toomanyparts错误,通常是由于表中数据分片(parts)数量超过系统限制,导致合并(merge)操作无法及时处理。
七七powerful
·
2025-04-12 11:13
java
前端
数据库
好用的开源埋点方案-ClkLog埋点用户分析系统
项目基于神策分析SDK,采用
ClickHouse
数据库对采集数据进行存储,采用前后端分离的方式来实现的访问统计和用户画像分析系统。在这里,你可以轻松看到用户访问网页
ClkLog-开源埋点用户分析
·
2025-04-12 00:29
开源
Clickhouse
试用单机版部署
问题最近需要试用clklog数据收集的社区版,clklog用数据库是
Clickhouse
。这就需要我先单机部署一个
Clickhouse
数据库,先试用试用。
亚林瓜子
·
2025-04-11 23:23
clickhouse
数据库
aws
ec2
数据库测试|Elasticsearch和
ClickHouse
的对决
为什么是选择
ClickHouse
而不是这个或那个。
ClkLog-开源埋点用户分析
·
2025-04-11 20:59
ClkLog
数据库
clickhouse
ClkLog基于
ClickHouse
的百万日活实测报告
为了给ClkLog用户提供可靠的技术建议和解决方案,同时也为了节省成本,在
Clickhouse
官方支持下,我们在阿里云上对
ClickHouse
社区版、企业版进行了详细测试和成本分析。
·
2025-04-10 14:10
sdk开源数据数据分析用户体验
ClickHouse
接入prometheus监控
ClickHouse
接入prometheus监控在
ClickHouse
集群环境下(假设你有3台服务器),使用自带的Prometheus端点来监控是完全可行的。
风中凌乱
·
2025-04-10 03:06
监控服务
clickhouse
prometheus
服务器
ClickHouse
常见问题总结
1.
ClickHouse
在项目中扮演的是什么角色
ClickHouse
是一个高性能的实时分析型数据库,能够存储海量数据并且进行低延迟查询,并且支持复杂的聚合计算。
zxhl0927
·
2025-04-08 10:04
clickhouse
大数据
数据分析开源可视化工具
superset简单易用,可以对接mysql、presto、doris、postgresql、
ClickHouse
、sparkSQL、hive、oracle、sqlserver、Elasticsearch
PONY LEE
·
2025-04-08 07:17
数据可视化
数据分析
数据可视化
ClickHouse
的“独孤九剑”:极速查询的终极秘籍
而在这场激烈的角逐中,
ClickHouse
以其“独孤九剑”般的绝世武功,横空出世,令群雄侧目。
ClickHouse
是一个用于联机分析处理(OLAP)的开源分布式数据管理系统。
·
2025-04-07 18:04
程序员
clickhouse
修改默认数据目录和log目录
修改数据目录创建数据文件夹/opt/aspire/product/isp_cert/opt/aspire/product/isp_cert/log安装时生成的默认文件迁移mv/var/lib/
clickhouse
手把手教你学AI
·
2025-04-07 15:33
flink
大数据
big
data
clickhouse
修改数据目录
clickhouse
默认数据目录在/var/lib/
clickhouse
,一般分区空间有限,需要修改。只要停止数据库之后移走该目录再软连接回原地址,即可不修改config.xml实现对数据目录的修改。
shy_snow
·
2025-04-07 14:01
安装部署
数据库
linux
数据仓库
Clickhouse
更改数据目录
在安装使用
Clickhouse
的时候,会默认将其数据文件放到系统盘(/var/lib/
clickhouse
)下面。导致后续系统盘数据变大。
x²+(y-√³x²)²=1
·
2025-04-07 14:31
ClickHouse
clickhouse
修改数据存储目录
clickhouse
修改数据存储目录
clickhouse
默认数据目录是:/var/lib/
clickhouse
。
Tate小白
·
2025-04-07 14:31
其他
clickhouse
linux
运维
【
Clickhouse
】
Clickhouse
千万数据 如何更改列的类型
请问我有个千万数据的
clickhouse
数据库,然后有个表有个字段是string类型,然后我想把这个字段改成Array类型,尝试如下方案1.1alter语句直接更改字段类型,发现会提示更改错误,但是
九师兄
·
2025-04-07 14:00
clickhouse
数据库
java
1024程序员节
centos 7.9 单节点
clickhouse
-22.10.2.11 并修改数据目录
提前准备好以下
clickhouse
-client-22.10.2.11-amd64.tgz
clickhouse
-common-static-22.10.2.11-amd64.tgz
clickhouse
-common-static-dbg
菜鸟运维只想涨薪
·
2025-04-07 14:29
centos
clickhouse
linux
ClickHouse
进阶技巧:解锁数据处理的高级潜能
ClickHouse
进阶技巧:解锁数据处理的高级潜能宝子们,之前我们已经对
ClickHouse
有了一定的了解,也掌握了一些入门的技巧。
大数据方向陪跑私教
·
2025-04-07 14:29
数据库
大数据
Clickhouse
集群集群安装
1.环境信息:[root@bigdata003
clickhouse
-server]#cat/etc/redhat-releaseCentOSLinuxrelease7.9.2009(Core)2.在/etc
大浪淘沙2023
·
2025-04-05 09:44
clickhouse
hadoop
linux
hdfs
Datax-web 添加达梦数据库
版本后端项目分支使用2.1.3-alpha-releaseGitHub-WeiYe-Jing/datax-web:DataX集成可视化页面,选择数据源即可一键生成数据同步任务,支持RDBMS、Hive、HBase、
ClickHouse
蝈蝈噶蝈蝈噶
·
2025-04-05 05:14
数据库
java
前端
ClickHouse
与TiDB实操对比:从入门到实战的深度剖析
ClickHouse
与TiDB实操对比:从入门到实战的深度剖析宝子们,在当今数据驱动的时代,选择合适的数据库对于处理海量数据和支撑业务发展至关重要。
大数据方向陪跑私教
·
2025-03-26 19:34
数据库
clickhouse
StarRocks x Demandbase ,助力北美 ABM 营销平台降本 90%!
通过将
ClickHouse
替换为StarRocks,Demandbase解决了性能与灵活性问题。新架构基于ApacheIceberg和StarRocks,显著提升了数据处理
StarRocks_labs
·
2025-03-25 22:54
ABM
demand
大数据
什么是
ClickHouse
宝子们,
ClickHouse
到底是个啥?宝子们,咱在互联网的世界里闯荡,是不是经常会听到一些让人摸不着头脑的技术名词?今天我就来跟大家唠唠一个超火的玩意儿——
ClickHouse
。
大数据方向陪跑私教
·
2025-03-25 05:15
大数据技术
clickhouse
数据库
ClickHouse
怎么学习
宝子们,
ClickHouse
到底咋学呀?宝子们,之前咱们聊了
ClickHouse
是啥,为啥这么牛,那肯定有不少小伙伴心里痒痒,想自己动手学一学这个神奇的
ClickHouse
吧?
大数据方向陪跑私教
·
2025-03-25 05:15
大数据技术
clickhouse
学习
使用
clickhouse
-backup做数据备份与还原
一、
clickhouse
-backup简介
clickhouse
-backup是社区开源的一个
clickhouse
备份工具,可用于实现数据迁移。
bigdata-rookie
·
2025-03-24 22:28
clickhouse
clickhouse
大数据
linux
clickhouse
创建数据库以及表
IFNOTEXISTS]db_name[ONCLUSTERcluster][ENGINE=engine(...)]例子CREATEDATABASEIFNOTEXISTSchtest;--使用默认库引擎创建库默认情况下,
ClickHouse
鸭梨山大哎
·
2025-03-21 12:45
clickhouse
go
clickhouse
query
在Go中使用
clickhouse
-go查询
ClickHouse
数据库非常简单。以下是一个完整的示例,展示如何连接
ClickHouse
并执行查询操作。
leijmdas
·
2025-03-21 01:41
golang
clickhouse
开发语言
数据中台(二)数据中台相关技术栈
Amabari+HDP1.2.CM+CDH2.相关的技术栈数据存储:HDFS,HBase,Kudu等数据计算:MapReduce,Spark,Flink交互式查询:Impala,Presto在线实时分析:
ClickHouse
Yuan_CSDF
·
2025-03-20 05:25
#
数据中台
flink从kafka读取数据写入
clickhouse
本地表的实现
实现功能因为直接写
clickhouse
的分布式表在数据量比较大的时候会有各种问题,所以做了一个flink读取kafka数据然后路由写入到相应的本地表节点,并且关于不同的表的配置信息可以随时更改并设置生效时间
Breatrice_li
·
2025-03-19 22:29
kafka
flink
分布式
大数据
StarRocks x Demandbase ,助力北美 ABM 营销平台降本 90%!
通过将
ClickHouse
替换为StarRocks,Demandbase解决了性能与灵活性问题。新架构基于ApacheIceberg和StarRocks,显著提升了数据处理
·
2025-03-16 17:33
营销clickhouse
clickhouse
报错Too many partitions for single INSERT block
Code:252,e.displayText()=DB::Exception:ToomanypartitionsforsingleINSERTblock(morethan100).Thelimitiscontrolledby'max_partitions_per_insert_block'setting.Largenumberofpartitionsisacommonmisconception.I
qq_35640866
·
2025-03-16 16:13
clickhouse
clickhouse
sql
数据库
六月份阶段性大总结之Doris/
Clickhouse
/Hudi一网打尽
ClickHouse
「
Clickhouse
系列」分布式表&本地表详解「
ClickHouse
系列」
ClickHouse
之MergeTree原理「
ClickHouse
系列」Replication机制详解「
ClickHouse
王知无(import_bigdata)
·
2025-03-15 15:11
大数据
编程语言
人工智能
java
数据分析
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他