当前位置:首页 » 累加 - 第1页

05月02日

Spark综合学习笔记(八)SparkStreaming案例2 状态管理_斯特凡今天也很帅的博客

发布 : zsy861 | 分类 : 《随便一记》 | 评论 : 0 | 浏览 : 626次
Spark综合学习笔记(八)SparkStreaming案例2 状态管理_斯特凡今天也很帅的博客

学习致谢:https://www.bilibili.com/video/BV1Xz4y1m7cv?p=42需求:对从Socket接收的数据做WordCoun并要求能够和历史数据进行累加!如:先发了一个spark,得到spark,1然后不管隔多久再发一个spark,得到spark,2也就是说要对数据的历史状态进行维护!实现思路:一、updataStateByKey先设置checkpoint存储状态status,使用updataSt

关于我们 | 我要投稿 | 免责申明

Copyright © 2020-2022 ZhangShiYu.com Rights Reserved.豫ICP备2022013469号-1