0%

实时流计算之CEP实践

  • 流数据
    • 持续到达
    • 无限增长
    • 到达次序独立
  • 流计算

使用flink处理流数据

  • watermark 衡量时间进制的标准
    • 时间窗口:10s
  • 容错机制

CEP介绍

基于flink任务

ex:

实时营销:
用户第一次激活几小时内触发某个行为

def:

  • complex Event Process
    • 对象:append-only time-ordered sequence of events
    • 机制: continuous
  • CEP与SQL

解决什么问题

  • 过滤掉不满足条件的时间, 找到符合filter定义的事件
    • eg: 从还款事件中筛选出逾期还款事件
  • 找到符合pattern的事件
    • eg:贷款申请审批通过一小时后未提款
  • 事件流join数据表
    • 筛选出贷款事件中的女性用户
  • 窗口聚合

CEP平台(ICEYE)

  • 事件配置
  • 规则定义
  • 结果消费

应用

  • Trident实时营销
  • 后裔实时报表

特点