E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据架构
python开发大全、系列文章、精品教程
原python开发大全、系列文章、精品教程置顶2018年02月13日23:17:01
数据架构
师阅读数:40217所属专栏:python大数据版权声明:本文为博主原创文章,转载请注明来源。
念叨叨小姐
·
2023-09-29 14:51
【新版】系统架构设计师 - 层次式架构设计理论与实践
UIP设计思想中间层架构设计业务逻辑层工作流设计业务逻辑层设计数据访问层设计5种数据访问模式工厂模式在数据访问层应用ORM、Hibernate与CMP2.0设计思想灵活运用XMLSchema事务处理设计
数据架构
规划与设计架构
WorkLee
·
2023-09-28 14:26
软考
-
系统架构设计师
软考
系统架构设计师
系统架构设计师-大数据
目录一、大数据1、大
数据架构
2、大数据技术生态3、Lambda架构4、Kappa架构5、Lambda架构与Kappa架构对比一、大数据1、大
数据架构
大数据是指其大小或复杂性无法通过现有常用的软件工具,以合理的成本并在可接受的时限内对其进行捕获
张瑞东
·
2023-09-28 08:57
软考高级
系统架构师
系统架构
软件工程
大
数据架构
师——音乐数据中心平台离线数仓综合项目(三)
文章目录音乐数据中心平台离线数仓综合项目第二个业务:机器详细信息统计需求模型设计数据处理流程1.将数据导入MySQL业务库2.使用Sqoop工具抽取数据到HiveODS层3.使用SparkSQL对ODS层数据进行ETL清洗使用Azkaban配置任务流1.脚本准备2.编写Azkaban各个Job组成任务流3.清空数据4.提交Azkaban作业使用Superset数据可视化第三个业务:日活跃用户统计需
讲文明的喜羊羊拒绝pua
·
2023-09-27 23:11
大数据
大数据
hive
hadoop
Azkaban
Superset
现代
数据架构
-湖仓一体
当前的
数据架构
已经从数据库、数据仓库,发展到了数据湖、湖仓一体架构,本篇文章从头梳理了一下数据行业发展的脉络。
ladofwind
·
2023-09-27 14:59
湖仓一体
企业架构相关
数据架构
的作用首先是找到所有的业务对象和数据对象。在数据对象分析里面有一个重点就是主数据识别和分析。
chuixue24
·
2023-09-27 01:11
架构设计
企业架构
运用五视图方法进行软件架构设计--实战一
五视图法做架构设计的步骤是逻辑架构->
数据架构
->开发架构->运行架构->物理架构。一、五视图介绍(一)逻辑架构设计着重考虑功能需求系统应当向用户提供什么样的服务,关注点主要是行为或职责的划分。
燕山暮雪
·
2023-09-26 10:12
框架设计
架构设计
架构设计实战
架构五视图
Xelerator系统架构图的模板
三、横向描述在横向上,系统可以分为五个视图:逻辑架构、
数据架构
、
hsabrina
·
2023-09-26 02:21
工程架构
系统架构设计方法
系统架构
系统架构
设计模式
软件工程
系分 - 案例分析 - 架构设计(Web架构)
服务器分离应用服务器集群负载均衡负载均衡技术静态与动态算法Session共享机制有状态与无状态持久化技术ORM数据库技术CND内容分发网络XML与JSONWeb应用服务器REST响应式Web设计中台云计算边缘计算Web系统分层物联网架构大
数据架构
典型例题题目描述参考答案案例分析
WorkLee
·
2023-09-25 13:33
软考
-
系统分析师
软考
系统分析师
以业务为核心的云原生体系建设
1、企业架构的五个方面企业架构不仅仅是技术问题,还有流程问题和组织问题,总得来说分为五个方面,业务架构、技术架构、
数据架构
、研发流程和
架构师小秘圈
·
2023-09-25 09:31
scipy
makefile
crm
lighttpd
ipad
字节跳动大数据容器化构建与落地实践
动手点关注干货不迷路随着字节跳动旗下业务的快速发展,数据急剧膨胀,原有的大
数据架构
在面临日趋复杂的业务需求时逐渐显现疲态。
字节跳动技术团队
·
2023-09-24 14:48
大数据
云原生
运维
java
开发语言
【新版】系统架构设计师 - 案例分析 - 架构设计<Web架构>
服务器分离应用服务器集群负载均衡负载均衡技术静态与动态算法Session共享机制有状态与无状态持久化技术ORM数据库技术CND内容分发网络XML与JSONWeb应用服务器REST响应式Web设计中台云计算云原生架构边缘计算Web系统分层物联网架构大
数据架构
架构
WorkLee
·
2023-09-24 01:18
软考
-
系统架构设计师
软考
系统架构设计师
一文告诉你为什么时序场景下 TDengine 数据订阅比 Kafka 好
在TDengine3.0中,我们对流式计算、数据订阅功能都进行了再升级,帮助用户极大简化了
数据架构
的复杂程度,降低整体运维成本。
涛思数据(TDengine)
·
2023-09-23 06:12
TDengine技术解密
tdengine
kafka
数据库
TDengine 用户案例合集 | 智能环保项目的时序数据处理难点与优化实践
在本篇文章中,我们汇总了三个典型的智能环保项目的
数据架构
升级
涛思数据(TDengine)
·
2023-09-23 06:12
用户案例
tdengine
大数据
时序数据库
“源启2.0”:从自上而下的解构,到自下而上的重构
“向上”先理解和吃透客户的企业战略,进而自上而下地将企业战略拆解为业务架构,“向下”再将业务架构拆解为应用架构和
数据架构
,并进一步对齐技术架构。
中电金信
·
2023-09-22 15:36
重构
涅磐:时序数据库的终局与重生
近年来,物联网、车联网、工业互联网和智慧城市快速发展,时序数据库成为
数据架构
技术栈的标配。
YMatrix 官方技术社区
·
2023-09-21 22:10
数据库
时序数据库
postgresql
hbase
数据仓库
TDengine 用户案例合集 | 智能环保项目的时序数据处理难点与优化实践
在本篇文章中,我们汇总了三个典型的智能环保项目的
数据架构
升级
·
2023-09-21 16:35
数据库tdengine
Spring Boot+Spring mvc+Mybatis的基础框架demo
后续我会陆续更新,微服务架构(SpringBoot、SpringCloud)、分布式架构(Dobbo+Zookeeper)、大
数据架构
以及源码解析等相关的文章,感兴趣的
゛Smlie。
·
2023-09-21 12:25
java
Spring
Boot+Spring
最佳实践:TiDB 业务写变慢分析处理
作者:李文杰
数据架构
师,TUG广州地区活动组织者在日常业务使用或运维管理TiDB的过程中,每个开发人员或数据库管理员都或多或少遇到过SQL变慢的问题。
TiDB_PingCAP
·
2023-09-21 04:41
数据库
tidb
第四章:OceanBase集群技术架构
根据行数据到分区的映射关系不同,分为hash分区,List分区(按列表),range分区(按范围)等2.每一个分区,还可以用不同的维度再分为若干分区,叫做二级分区3.分区是OceanBase
数据架构
的基本单元
柯西极限存在准则
·
2023-09-21 01:49
OceanBase
oceanbase
数据库
最佳实践:TiDB 业务写变慢分析处理
作者:李文杰
数据架构
师,TUG广州地区活动组织者在日常业务使用或运维管理TiDB的过程中,每个开发人员或数据库管理员都或多或少遇到过SQL变慢的问题。
·
2023-09-20 21:16
tidbpingcap最佳实践
最佳实践:TiDB 业务写变慢分析处理
作者:李文杰
数据架构
师,TUG广州地区活动组织者在日常业务使用或运维管理TiDB的过程中,每个开发人员或数据库管理员都或多或少遇到过SQL变慢的问题。
·
2023-09-20 21:45
tidbpingcap最佳实践
Hologres揭秘:优化COPY,批量导入性能提升5倍+
Hologres(中文名交互式分析)是阿里云自研的一站式实时数仓,这个云原生系统融合了实时服务和分析大数据的场景,全面兼容PostgreSQL协议并与大数据生态无缝打通,能用同一套
数据架构
同时支持实时写入实时查询以及实时离线联邦分析
阿里云Hologres
·
2023-09-20 20:38
系统架构完整实例
用例图,流程图开发架构,关注代码层次结构,程序包,sdk,第三方库,中间件等运行架构,关注并发,同步,死锁等物理架构,关注部署,网络结构,服务器等基础设施
数据架构
,关注数据持久化,存储。分布式,
步基
·
2023-09-20 14:22
架构设计
架构设计
互联网架构演进方向
目录1业务架构1.1单体模式1.2中台战略1.2.1概述1.2.2背景1.2.3案例1.3总结与思考2
数据架构
2.1单数据库2.2主从读写2.3分库分表2.4高速缓存2.5数据多样化2.5.1分布式文件
赵广陆
·
2023-09-19 19:45
architect
架构
一文告诉你为什么时序场景下 TDengine 数据订阅比 Kafka 好
在TDengine3.0中,我们对流式计算、数据订阅功能都进行了再升级,帮助用户极大简化了
数据架构
的复杂程度,降低整体运维成本。
·
2023-09-19 17:19
tdengine时序数据库
关于硬盘质量大数据分析的思考
近日,看到Backblaze分享了一遍关于硬盘运行监控
数据架构
的文章,觉得挺有意义的,本文就针对这方面跟大家聊聊。
古猫先生
·
2023-09-18 20:06
SSD
数据分析
数据挖掘
阿里大
数据架构
师告诉你这些大数据面试题!你不看?
随着云时代的来临,大数据(Bigdata)也吸引了越来越多的关注。分析师团队认为,大数据(Bigdata)通常用来形容一个公司创造的大量非结构化数据和半结构化数据,这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起,因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百或甚至数千的电脑分配工作。在这里相信有许多想要学习大数据的同学,大家可以
大数据学习02
·
2023-09-18 09:15
数据治理-
数据架构
-度量指标
企业
数据架构
衡量指标反映了架构目标:架构接受率、实施趋势、业务价值。
数据架构
衡量工作通常作为项目总体业务客户满意度的一部分,每年开展一次。
世润
·
2023-09-18 04:28
数据治理
架构
数据治理
大数据
数据治理-数据模型计分卡
模型多大程度上反映了业务需求152模型的完整性如何153模型与模式的匹配度是多少104模型的结构如何155模型的通用性如何106模型遵循命名标准的情况如何57模型的可读性如何58模型的定义如何109模型与企业
数据架构
的一致性如何
世润
·
2023-09-18 04:27
数据治理
架构
数据治理
大数据
数据仓库
数据库
数据治理-
数据架构
企业架构包含业务架构、
数据架构
、应用架构和技术架构等。好的架构能帮助组织了解系统状态、加速转好,实现守规提效的目标。
数据架构
是数据管理的基础,需要在不同层级上
世润
·
2023-09-17 15:28
数据治理
架构
数据治理
大数据
数据库
数据治理-元数据管理-元
数据架构
类型
集中式元
数据架构
集中式元
数据架构
是由单一的元数据存储库组成,包含来自各种不同源的元数据副本。IT资源有
世润
·
2023-09-17 15:55
数据治理
架构
微服务
云原生
DAMA-数据治理体系
数据架构
管理:定义数据资产管理蓝图。数据开发:数据的分析、设计、实施、
振宅的博客
·
2023-09-16 12:40
数据治理
大数据
大数据之存算分离架构研究
存算分离架构是一种新的
数据架构
的设计范式,自上而下分为数据分析层、计算层和存储层,其中计算层和存储层解耦合,都是独立的分布式服务。
振宅的博客
·
2023-09-16 12:08
大数据
Data Lakehouse的未来-开放
在急于拥有这个术语的过程中,许多供应商忽略了这样一个事实,即
数据架构
的开放性是其持久性和寿命的保证。1.关于数据仓库和数据湖数据湖和数据仓库将大
大数据杂货铺
·
2023-09-16 09:22
信息化发展42
2、DC胁i定义了数据战略、数据治理、
数据架构
、数据应用、数据安全、数据质量、数据标准和数据生存周期8个核心能力域。数
AbelZ_01
·
2023-09-16 00:23
软考高项4版
软考
【数据网格架构】分布式数据网格作为集中式数据单体的解决方案
企业
数据架构
师不应构建大型集中式数据平台,而应创建分布式数据网格。ThoughtWorks的首席技术顾问ZhamakDehghani在旧金山QCon的演讲和相关文章中表示,这种方法的改变需要范式转变。
架构师酒馆
·
2023-09-15 18:41
架构
分布式
数据网格架构
数据架构
数据治理-数据管理角色
无论是直接角色(如设计数据仓库的
数据架构
师),还是间接角色(如开发网站的Web开发人员),所有IT角色都可以映射到数据生命周期的某个点,因此他们都会影响数据管理。
世润
·
2023-09-15 07:02
数据治理
大数据
数据治理
电商平台架构之道——基于DDD模式的分层架构
本文将从业务架构、技术架构、
数据架构
三个方面进行阐述,并通过实践案例展示如何基于DDD模式构建电商平台架构。2.核心概念2.1DDD(Domain-DrivenDesign)模式Do
禅与计算机程序设计艺术
·
2023-09-14 02:29
Java
编程实践
Python
自然语言处理
人工智能
语言模型
编程实践
开发语言
架构设计
Hive和Hbase的区别
先放结论:Hbase和Hive在大
数据架构
中处在不同位置,Hbase主要解决实时数据查询问题,Hive主要解决数据处理和计算问题,一般是配合使用。
夜空最亮的9星
·
2023-09-12 15:34
【珍藏版】数仓平台、推荐系统架构选型及解决⽅案
持续输出敬请关注大
数据架构
湖仓一体化流批一体离线+实时数仓各种大数据解决方案各种大数据新技术实践持续输出敬请关注【好文推荐】【好文推荐】【好文推荐】【好文推荐】【好文推荐】⼤数据平台基础架构及解决⽅案_
大数据研习社
·
2023-09-12 06:02
大数据实战精英+架构师
大数据
数据仓库
cloudera
推荐算法
人工智能
得帆信息副总裁——孔金:低代码在医药行业的应用实践
伴随着数字化转型的大趋势,以及研发、采购、销售等相关职能部门的迫切要求,现有系统的缺点被放大,各个系统的
数据架构
、技术架构、应用
得帆低代码PaaS
·
2023-09-11 13:52
低代码
数字化转型
低代码平台
低代码
健康医疗
数据仓库-主数据管理
本文来源于网络,如有侵权,联系本人删除:tianyachangkong来源:BAT大
数据架构
导读:企业主数据指企业内一致并共享的业务主体。
zhubeili
·
2023-09-11 06:39
数仓专栏
数据仓库
【新版】系统架构设计师 - 案例分析 - 总览
总览新旧大纲对应旧版新版系统规划软件架构设计设计模式系统设计系统建模分布式系统设计嵌入式系统设计系统的可靠性分析与设计系统的安全性和保密性设计系统计划信息系统架构的设计理论和实践层次式架构的设计理论与实践云原生架构设计理论与实践设计模式面向服务的架构设计理论与实践嵌入式系统概述通信系统架构的设计理论和实践安全架构的设计理论与实践大
数据架构
设计理
WorkLee
·
2023-09-11 01:04
软考
-
系统架构设计师
软考
系统架构设计师
高效数据湖构建与数据仓库融合:大规模
数据架构
最佳实践
两大不同理念数据湖数据仓库数据湖与数据仓库的融合统一数据目录数据清洗和转换数据安全和权限控制数据分析和可视化数据湖与数据仓库融合的优势未来趋势云原生数据湖自动化数据处理边缘计算与数据湖融合结论欢迎来到云计算技术应用专栏~高效数据湖构建与数据仓库融合:大规模
数据架构
最佳实践
IT·陈寒
·
2023-09-10 09:37
架构设计
云原生
云计算技术应用
数据分析
数据仓库
架构
数据治理-
数据架构
-企业
数据架构
是什么
数据架构
定义了对组织非常重要元素的标准术语和设计。企业
数据架构
的设计中包括业务数据描述,如数据的收集、存储、整合、移动和分布。
世润
·
2023-09-10 08:04
架构
数据治理-
数据架构
-企业架构类型
企业架构类型
数据架构
的设计及实施与其他架构紧密相关,企业架构包括业务架构、
数据架构
、应用架构和技术架构。
世润
·
2023-09-08 09:23
架构
数字化进入深水区,湖仓一体让企业具备立体化数据能力丨爱分析访谈
与此同时,业务侧对数据分析、数据挖掘、数据探索的广泛应用也反推企业升级底层
数据架构
,通过优化数据引擎支撑数据开发、数据资产管理、数据应用等数据能力建设。国产基础软件发展正当时。
ifenxi爱分析
·
2023-09-07 20:10
大数据
数据库
从70万字SRE神作,我提炼出7千字精华与君共勉
作者介绍**梁铭图,**新炬网络首席架构师,10年以上数据库运维、数据分析、数据库设计以及系统规划建设经验,在
数据架构
管理以及数据资产管理方面有深入研究。
weixin_48726650
·
2023-09-07 15:53
运维
大数据
编程语言
数据库
机器学习
构建现代应用:Java中的热门架构概览
文章目录1.三层架构2.Spring框架3.微服务架构4.JavaEE(EnterpriseEdition)5.响应式架构6.大
数据架构
7.领域驱动设计(Domain-DrivenDesign,DDD)
IT·陈寒
·
2023-09-03 02:09
Java学习路线
java
架构
开发语言
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他