822数据实时采集 ·数据采集系统的基本架构一般有以下三个部分: Agent:主动采集数据,并把数据推送到 Collector部分 Collector:接收多个 Agent的数据,并实现有序、可靠、高性能的 转发 Store:存储 Collector转发过来的数据 Store nt Collecto Store Agent Collector Store 数据采集系统基本架构
• 数据采集系统的基本架构一般有以下三个部分: – Agent:主动采集数据,并把数据推送到Collector部分 – Collector:接收多个Agent的数据,并实现有序、可靠、高性能的 转发 – Store:存储Collector转发过来的数据 8.2.2 数据实时采集 数据采集系统基本架构
823数据实时计算 数据实时计算阶段对采集的数据进行实时的分析和计算,并反馈实时 结果 经流处理系统处理后的数据,可视情况进行存储,以便之后再进行分 析计算。在时效性要求较高的场景中,处理之后的数据也可以直接丢 弃 数据流入 流处理系统 数据流出 实时计算 计算结果 数据实时计算流程
• 数据实时计算阶段对采集的数据进行实时的分析和计算,并反馈实时 结果 • 经流处理系统处理后的数据,可视情况进行存储,以便之后再进行分 析计算。在时效性要求较高的场景中,处理之后的数据也可以直接丢 弃 8.2.3 数据实时计算 数据实时计算流程