数据中台-常用工具组件:DataX、Flink、Dolphin Scheduler、TensorFlow和PyTorch等
数据实施服务工具组件概览数据中台的数据实施服务涵盖数据采集、处理、调度、分析与应用全流程,以下为关键工具组件及其作用:工具类型核心功能典型应用场景DataX离线数据采集多源异构数据批量同步数据仓库ODS层数据导入ApacheFlink实时计算引擎流批一体数据处理、实时ETL、复杂事件处理实时监控、DWD层实时清洗与聚合DolphinScheduler任务调度平台可视化编排ETL任务、依赖管理与监控