大数据复杂事件处理

大数据复杂事件处理

复杂事件处理(CEP)是一种基于流处理的技术,将系统数据看作不同类型的事件,通过分析事件之间的关系,建立不同的事件关系序列库,并利用过滤、关联、聚合等技术,最终由简单事件产生高级事件,并通过模式规则的方式对重要信息进行跟踪和分析,从实时数据中发掘有价值的信息。Streaming接收到数据后会马上对数据进行加工处理,由于数据是逐条发送并按照时间列队,像水流一样,因此被称为数据流,而Streaming对数据流进行操作因此被称作流处理Streaming特点实时响应,低延迟。数据不存储,先计算,连续查询,事件驱动。Streaming应用场景实时分析:如实时日志处理、交通流量分析等。Flink CEP是在flink之上实现的复杂事件处理(CEP)库,它允许我们在事件流中检测事件的模式,让我们有机会掌握数据中重要的事项。
487