用户工具

站点工具


flink_应用场景

差别

这里会显示出您选择的修订版和当前版本之间的差别。

到此差别页面的链接

后一修订版
前一修订版
上一修订版 两侧同时换到之后的修订记录
flink_应用场景 [2019/12/02 08:01]
plough 创建
flink_应用场景 [2019/12/02 08:19]
plough
行 1: 行 1:
-  * 实时大屏:销售额网站PV销量数据、服务器状态监控 +===== 实时计算场景 ===== 
-  * 程序出现错误日志时及时告警通知 +  - 实时数据存储。实时数据存储的时候做一些微聚合过滤某些字段、数据脱敏,组建数据仓库,实时 ETL。 
-  * 实时推荐 +  - 实时数据分析。实时数据接入机器学习框架(TensorFlow)或者一些算法进行数据建模、分析,然后动态的给出商品推荐、广告推荐 
-  * ……+  - 实时监控告警。金融相关涉及交易、实时风控、车流量预警、服务器监控告警、应用日志告警 
 +  - 实数据报表。活动营销时销售额/销售量大屏,TopN 商品 
 + 
 +===== 实时计算技术实现 ===== 
 +的技术环节有:实采集、实时计算、实时下发。 
 +实时下发的下游可能是: 
 +  * 告警方式(邮件、短信、钉钉、微信) 
 +  * 存储(消息队列、DB、文件系统等)。监控大屏从存储里面查询数据,就可以看到实时数据。 
 + 
 +===== 批处理和流处理的区别 ===== 
 +批处理: 
 +  * 数据大小固定 
 +  * 复杂操作 
 +  * 需要一段时间 
 +流处理: 
 +  * 数据大小未知 
 +  * 简单操作 
 +  * 及时响应
  
-根本的需求都是**实时查看数据信息**。 
flink_应用场景.txt · 最后更改: 2019/12/08 12:40 由 plough