flink_应用场景
差别
这里会显示出您选择的修订版和当前版本之间的差别。
| 后一修订版两侧同时换到之后的修订记录 | |||
| flink_应用场景 [2019/12/02 16:01] – 创建 plough | flink_应用场景 [2019/12/02 16:17] – plough | ||
|---|---|---|---|
| 行 1: | 行 1: | ||
| - | * 实时大屏：销售额、网站PV、销量数据、服务器状态监控 | + | == 实时计算场景 == |
| - | * 程序出现错误日志时及时告警通知 | + | - 实时数据存储。实时数据存储的时候做一些微聚合、过滤某些字段、数据脱敏，组建数据仓库，实时 ETL。 |
| - | * 实时推荐 | + | - 实时数据分析。实时数据接入机器学习框架（TensorFlow）或者一些算法进行数据建模、分析，然后动态的给出商品推荐、广告推荐 |
| - | * …… | + | - 实时监控告警。金融相关涉及交易、实时风控、车流量预警、服务器监控告警、应用日志告警 |
| + | - 实时数据报表。活动营销时销售额/ | ||
| + | |||
| + | == 实时计算技术实现 == | ||
| + | 涉及的技术环节有：实时采集、实时计算、实时下发。 | ||
| + | 实时下发的下游可能是： | ||
| + | * 告警方式（邮件、短信、钉钉、微信） | ||
| + | * 存储（消息队列、DB、文件系统等）。监控大屏从存储里面查询数据，就可以看到实时数据。 | ||
| + | |||
| + | == 批处理和流处理的区别 == | ||
| + | 批处理： | ||
| + | * 数据大小固定 | ||
| + | * 复杂操作 | ||
| + | * 需要一段时间 | ||
| + | 流处理： | ||
| + | * 数据大小未知 | ||
| + | * 简单操作 | ||
| + | * 及时响应 | ||
| - | 根本的需求都是**实时查看数据信息**。 | ||
flink_应用场景.txt · 最后更改: 2019/12/08 20:40 由 plough