E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
实时计算
一文帮你搞定 H5、小程序、Taro 长列表曝光埋点
目录前言:1.监听列表内元素曝光的常见方法1.1方式一:根据接口下发分页数据估算可见元素1.2方式二:监听滚动事件,
实时计算
元素相对位置1.3方式三:利用浏览器标准API监听元素可视区变化2.列表内元素曝光事件监听的具体实现
自由家
·
2023-07-19 14:56
软件测试工具
软件测试
自动化测试
java
linux
服务器
android
appium
小程序
自动化
黑马头条 分布式任务调度 定时计算热点文章、xxl-job、kafkaStream
:新发布的文章会展示在前面,并不是热点文章1.2实现思路把热点数据存入redis进行展示判断文章是否是热点,有几项标准:点赞数量,评论数量,阅读数量,收藏数量计算文章热度,有两种方案:定时计算文章热度
实时计算
文章热度
软工菜鸡
·
2023-07-19 12:31
微服务
java
后端
即刻洞悉市场,一文教你实时把握股票涨幅
本教程主要提供一种基于DolphinDB流数据处理框架,
实时计算
1分钟、5分钟和10分钟涨幅榜的低延时解决方案。
DolphinDB智臾科技
·
2023-07-18 22:10
量化金融
量化金融
量化交易
流计算
数据库
股票交易
DolphinDB 与通联数据达成合作,构建快捷高效的一站式行情数据服务
在此前发布的多篇教程中,我们为大家展示了DolphinDB如何为因子投研、
实时计算
等业务场景加速,并进行了手把手教学,比如:对接极速行情,真的很简单……又比如:自己动手,搭一套行情回放系统这些文章发布后
DolphinDB智臾科技
·
2023-07-18 22:09
数据库
行情数据
高频数据
高频交易
量化金融
运行虚幻引擎 5(Unreal Engine 5)的配置要求及推荐
它可以
实时计算
运动之间的光
3D渲染技巧分享
·
2023-07-18 18:59
虚幻
ue5
游戏引擎
基于 ByteHouse 构建实时数仓实践
实时计算
起源于对数据加工时效性的严苛需求:数据的业务价值随着时间的流逝会迅速降低,因此在数据产生后必须尽快对其进行计算和处理,从而最大效率实现数据价值转化,对实时数仓的建设需求自然而
qw_6918966011
·
2023-07-18 10:18
java
大数据
网络
联通 Flink
实时计算
平台化运维实践
摘要:本文整理自联通数科
实时计算
团队负责人、ApacheStreamParkCommitter穆纯进在FlinkForwardAsia2022平台建设专场的分享,本篇内容主要分为四个部分:
实时计算
平台背景介绍
Apache Flink
·
2023-07-18 07:08
flink
运维
大数据
IGV-基因组浏览器-改造记录(四)
天真如我,我收到了这么一个评论:增加
实时计算
Track的繁琐之处在IGV中,伴随窗口滑
生信石头
·
2023-07-18 06:28
轻松通关Flink第24讲:Flink 消费 Kafka 数据业务开发
在上一课时中我们提过在
实时计算
的场景下,绝大多数的数据源都是消息系统,而Kafka从众多的消息中间件中脱颖而出,主要是因为高吞吐、低延迟的特点;同时也讲了Flink作为生产者像Kafka写入数据的方式和代码实现
源码头
·
2023-07-18 00:01
大数据
kafka
flink
大数据
Spark性能优化:开发调优篇
Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/
实时计算
、机器学习、图计算等各个不同类型的计算操作,应用范围与前景非常广泛。
我还不够强
·
2023-07-17 19:58
使用DataX,从Greenplum将数据传输到Hive分区表中
我司使用Greenplum作为计算库,
实时计算
统计数据,但是数据量大了之后影响计算速度。
枫叶梨花
·
2023-07-17 12:11
hive
hadoop
数据仓库
HTAP系统架构实践总结
,物流,地理信息等商业场景下,原有的处理方式为在海量的历史数据中通过AP(分析型处理)数据库或者自建的大数据平台,完成对于历史数据的计算,然后将AP计算的结果作为TP(事务型处理)的输入结构,完成对于
实时计算
需求
gjggw123
·
2023-07-16 18:16
技术研究
数据库
数据仓库
多个input框或其他框的值相加之和并且处理精度问题
需求:实付金额不能手动输入,并且等于购买数量✖优惠价➖平台补贴➖店铺补贴的
实时计算
把需要处理的这几个框绑上change事件等于同一个方法名@change="handleChange"handleChange
是阿狸
·
2023-07-16 11:52
elementui
前端
javascript
vue.js
多个input相加计算结果为NaN的处理
因为我的需求:购买数量*优惠价(单价)-平台补贴-店铺补贴=实付金额的
实时计算
原因:第一个input输入的时候,相应的其他的input也在进行计算,而这时其他输入框可以由上图可以看出另外两个是undefined
是阿狸
·
2023-07-16 11:52
javascript
开发语言
ecmascript
前端
elementui
百信银行基于 Apache Hudi 实时数据湖演进方案
简介:本文介绍了百信银行
实时计算
平台的建设情况,实时数据湖构建在Hudi上的方案和实践方法,以及
实时计算
平台集成Hudi和使用Hudi的方式。
阿里开发者
·
2023-07-15 01:39
存储
消息中间件
分布式计算
关系型数据库
MySQL
大数据
Kafka
Apache
流计算
索引
实时计算
Flink> 准备工作——账号管理
本页目录账号模型主子账号账号安全账号模型授权RAM控制台:https://ram.console.aliyun.com/
实时计算
Flink账号系统目前仅支持阿里云账号体系和RAM主子账号模型。
weixin_34018202
·
2023-07-15 00:39
大数据
浅谈大数据的过去、现在和未来
本文作者:PaulLin本文链接:2021/06/23/浅谈大数据的过去、现在和未来/相信身处于大数据领域的读者多少都能感受到,大数据技术的应用场景正在发生影响深远的变化:随着
实时计算
、Kubernetes
zhisheng_blog
·
2023-07-14 20:01
数据库
数据仓库
大数据
分布式
编程语言
flink 开发平台Dinky 构建 Flink CDC 整库入仓入湖
原文:http://www.senlt.cn/article/866753893.html摘要:本文介绍了如何使用Dinky
实时计算
平台构建FlinkCDC整库入仓入湖。
javastart
·
2023-07-14 07:40
大数据
flink
大数据
数据库
基于 Dinky + FlinkSQL + Flink CDC 同步 MySQL 数据到 Elasticsearch、Kafka
一、概述Dinky是一个开箱即用的一站式
实时计算
平台以ApacheFlink为基础,连接OLAP和数据湖等众多框架致力于流批一体和湖仓一体的建设与实践。本文以此为FlinkSQL可视化工具。
拉裤兜兜子
·
2023-07-14 07:07
kafka
mysql
flink
流批一体架构在快手的实践和思考|行业实践专栏上线
本期课程涵盖6位互娱行业
实时计算
领域专家详细解读Flink在快手、爱奇艺、小红书、B站、BIGO、斗鱼等企业内的应用与落地。围绕业务场景、业务痛点、面临挑战、如何破局等宝贵实践经验倾囊相授。
·
2023-07-13 15:42
后端flink大数据实时计算
Flink SQL 在快手的扩展和实践
摘要:本文整理自快手
实时计算
团队技术专家张静、张芒在FlinkForwardAsia2021的分享。
·
2023-07-13 15:30
flink大数据实时计算编程
腾讯看点基于 Flink 的实时数仓及多维实时数据分析实践
但是当数据量巨大的情况下,拿腾讯看点来说,一天上报的数据量达到万亿级的规模,要实现极低延迟的
实时计算
和亚秒级的多维实时查询是有技术挑战的。
·
2023-07-13 15:24
flink
Flink
实时计算
资源如何优化
flink
实时计算
任务可以从以下四个方面进行优化内存优化:Flink任务需要大量的内存来存储数据和状态信息。因此,我们需要尽可能地减少内存的使用量。
sofo2017
·
2023-06-23 14:03
数据仓库技术体系
flink
flink
java
jvm
只需 2 小时,变身 Flink 实战派:Flink-Learning实战营火热报名中
您可获得的专属权益5000CU*小时的阿里云
实时计算
Flink云资源供您免费使用,至少可完成100次
Apache Flink
·
2023-06-22 13:16
flink
大数据
只需 2 小时,变身 Flink 实战派:Flink-Learning实战营火热报名中
您可获得的专属权益5000CU*小时的阿里云
实时计算
Flink云资源供您免费使用,至少可完成100次
·
2023-06-21 14:52
后端flink大数据实时计算
基于 Apache Flink 的
实时计算
数据流业务引擎在京东零售的实践和落地
内容主要包括五个方面:京东零售
实时计算
的现状
实时计算
框架场景优化:TopN场景优化:动线分析场景优化:FLINK一站式机器学习点击查看更多技术内容一、京东零售
实时计算
的现状1.1现状技术门槛高、学习成本大
·
2023-06-21 14:18
后端flink大数据
JRC Flink流作业调优指南
作者:京东物流康琪本文综合ApacheFlink原理与京东
实时计算
平台(JRC)的背景,详细讲述了大规模Flink流作业的调优方法。
·
2023-06-21 02:25
apache京东云flink
flink 实时数仓构建与开发[记录一些坑]
数仓建模注意项数仓建模开发规范命名规范问题与原因分析1、debezium采集pg表,数据类型问题2、业务库出现大批量刷表数据,debezium采集connector可能会挂3、业务库出现大批量刷表数据,
实时计算
任务会出现长时间延迟或内存溢出或任务失败
cg6
·
2023-06-20 08:24
flink
大数据
flink
kafka
java
大数据周会-本周学习内容总结017
离线)】1.1【流程图】1.2【架构图】1.3【使用场景】1.4【技术架构】02【fhzn项目】03【专利】01【调研-计算(实时、离线)】1.1【流程图】开始->数据采集->数据存储->数据预处理->
实时计算
upward337
·
2023-06-20 04:36
大数据
大数据
计算
elasticSearch
java
git
Unity入门6——光源组件
预先算好,不实时参与光线计算2.Color:光源颜色3.Mode:光源模式Realtime:实时光源每帧
实时计算
,效果好,性能消耗大Baked:烘焙光源事先计算好,无法动态变化Mixed:混合光源预先
weixin_53163894
·
2023-06-19 20:11
Unity
unity
游戏引擎
SparkStreaming
1、SparkStreaming概述数据处理类型分类静态数据数据源是不变的、有限的、显式离散的多适用于批量计算、离线计算流数据数据是变动的、无限的、连续的多适用于
实时计算
,能在秒级、秒内处理完成实时数据分类小时级分钟级秒级
SparkSql
·
2023-06-19 18:47
spark
1024程序员节
java
sql
第三届 Apache Flink 极客挑战赛暨 AAIG CUP 报名开始!
简介:万众期待的第三届极客挑战赛,报名进行中~伴随着海量数据的冲击,数据处理分析能力在业务中的价值与日俱增,各行各业对于数据处理时效性的探索也在不断深入,作为主打
实时计算
的计算引擎-ApacheFlink
·
2023-06-19 12:46
Spark Streaming
实时计算
实例
SparkStreaming
实时计算
实例一、实验内容编写SparkSteaming应用程序,实现实时词频统计。二、实验步骤1.运行nc,模拟数据源。nc-lk9999启动服务端且监听Socket服务。
兜里没有一毛钱
·
2023-06-19 11:23
Hadoop大数据
spark
scala
大数据
基于Kafka和Spark实现
实时计算
系统
基于Kafka和Spark实现
实时计算
系统一、概述1.Kafka介绍2.Spark介绍3.
实时计算
系统的定义和特点二、
实时计算
系统设计1.数据采集阶段2.消息传输阶段3.数据处理和计算阶段4.数据存储和查询阶段三
格林希尔
·
2023-06-19 11:21
Kafka
搜索引擎
大数据
数据结构
kafka
spark
spark-streaming笔记
、hive、SparkCore、Sparksql=》mapreducespark2.SQL的交互式查询:hive、SparkSQL3.流式框架:flume、kafka、SparkStreaming4.
实时计算
最美不过你回眸
·
2023-06-18 23:34
老师笔记
揭秘阿里云 Flink 智能诊断利器——Flink Job Advisor
作者:藏红一、引言阿里云
实时计算
Flink作为一款专业级别的高性能实时大数据处理系统,它在各种业务场景中都发挥了关键的作用。
Apache Flink
·
2023-06-18 12:08
Flink
大数据
实时计算
阿里云
flink
大数据
运维
人工智能
FlinkSQL行级权限解决方案及源码
源码地址:https://github.com/HamaWhiteGG/flink-sql-security注:此方案已产品化集成到
实时计算
平台Dinky,欢迎试用
数据探险家
·
2023-06-18 08:26
Flink
flink
FlinkSQL
Calcite
Lineage
Spark高频面试题(建议收藏)
Spark是一个基于内存的,用于大规模数据处理(离线计算、
实时计算
、快速查询(交互式查询))的统一分析引擎。
无精疯
·
2023-06-16 22:12
spark
面试
java
大数据
hadoop
来报名丨下一代因子挖掘统一框架:打破界限的流式
实时计算
平台
大家期待已久的量化科技嘉年华,现在正式开启报名啦!2023年6月2日-3日,DolphinDB联合主办的“2023·量化科技嘉年华”将在上海世博中心召开,本次大会主题涵盖因子/数据/交易/算法/算力,通过国内外顶尖量化金融专家最前沿、最专业的视角,深入探讨量化人真正关注的科技与狠活。点击链接报名:2023QuanTechFestival量化科技嘉年华超强阵容和超多活动本次嘉年华为期两天,涵盖1大峰
DolphinDB智臾科技
·
2023-06-16 16:33
量化交易
数据库
因子挖掘
量化金融
机器学习
量化因子在 DolphinDB 中的流式实现攻略
DolphinDB的计算引擎不仅可以用于量化金融的回测和研发,也可以用于生产环境的
实时计算
,譬如各种频率的金融量化因子的流式
实时计算
。
DolphinDB智臾科技
·
2023-06-16 16:03
量化金融
流式计算
实时计算
因子挖掘
因子计算
量化因子
大数据项目实战之在线教育(04实时实现)
章项目需求及架构设计1.1项目需求分析一、数据采集平台搭建二、Kafka、Zookeeper中间件准备三、下游SparkStreaming对接Kafka接收数据,实现vip个数统计、栏目打标签功能、做题正确率与掌握度的
实时计算
功能
okbin1991
·
2023-06-15 20:50
大数据
kafka
分布式
只需 2 小时,变身 Flink 实战派:Flink-Learning实战营火热报名中
您可获得的专属权益5000CU*小时的阿里云
实时计算
Flink云资源供您免费使用,至少可完成100次
·
2023-06-15 16:54
后端flink大数据实时计算
图片懒加载与无限滚动 - IntersectionObserver
IntersectionObserver实现图片懒加载与无限滚动背景图片懒加载和滚动加载数据的需求一直存在,比较常见的方法是监听页面或者容器的滚动事件,
实时计算
节点与容器边界的关系,以实现不同的加载逻辑
·
2023-06-15 13:44
信也科技发布Plink
实时计算
平台,助力构建企业级实时数仓新篇章
近日,信也科技推出新一代实时数据开发一站式平台Plink(下称“Plink平台”)。该平台基于ApacheFlink项目自主研发,经过近年来的技术演进,现已具备高可用、高吞吐、灵活扩展等特点。Plink平台整合了Kafka、Hadoop和传统MPP数据库,以行业内多个业务的技术痛点为出发点,深度赋能业务系统,在实时风控、实时营销、实时分析等场景上广泛应用,场景覆盖率超过80%,处理效率提高近100
·
2023-06-15 11:08
数据库
Java进阶篇-SpringBoot集成RocketMQ
它采用了类似于Kafka的分布式架构设计,支持高吞吐量和高可用性的消息发布和订阅,广泛应用于大规模数据处理、在线交易、日志收集和
实时计算
等场景。
Yi_Sen_Z
·
2023-06-15 06:34
spring
boot
java
java-rocketmq
流计算、Flink和图计算
流计算流计算流计算概述静态数据和流数据批量计算和
实时计算
流计算概念流计算与Hadoop流计算框架流计算处理流程数据处理流程数据实时采集数据
实时计算
实时查询服务流计算的应用开源流计算框架StormStorm
so.far_away
·
2023-06-15 03:11
大数据技术原理与应用
flink
数据仓库
数据挖掘
134.如何进行
实时计算
这种
实时计算
的应用实例有金融服务、网络监控、电信数据管理、Web应用、生产制造、传感检测,等等。
大勇任卷舒
·
2023-06-15 02:04
详解大厂实时数仓建设
2.实时技术日趋成熟
实时计算
框架已经经历
jane9872
·
2023-06-14 10:07
大数据
人工智能
运维
嵌入式BSP工程师基本任务分析
维基百科上对嵌入式系统的定义如下:嵌入式系统(EmbeddedSystem),是一种嵌入机械或电气系统内部、具有专一功能和
实时计算
性能的计算机系统。
ST小智
·
2023-06-13 20:13
嵌入式软件开发
linux
单片机
基于 ByteHouse 构建实时数仓实践
实时计算
起源于对数据加工时效性的严苛需求:数据的业务价值随着时间的流逝会迅速降低,因此在数据产生后必须尽快对其进行计算和处理,从而最大效率实现数据价值转化,对实时数仓的建设需求自然而
·
2023-06-13 19:53
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他