2021年大数据Flink(二十一):​​​​​​​案例三 会话窗口

举报
Lansonli 发表于 2021/09/29 01:06:24 2021/09/29
【摘要】 目录 案例三 会话窗口 需求 代码实现 案例三 会话窗口 需求 设置会话超时时间为10s,10s内没有数据到来,则触发上个窗口的计算   ​​​​​​​代码实现 package cn.itcast.window; import lombok.AllArgsConstructor;import lombok...

目录

案例三 会话窗口

需求

代码实现


案例三 会话窗口

需求

设置会话超时时间为10s,10s内没有数据到来,则触发上个窗口的计算

 

​​​​​​​代码实现


  
  1. package cn.itcast.window;
  2. import lombok.AllArgsConstructor;
  3. import lombok.Data;
  4. import lombok.NoArgsConstructor;
  5. import org.apache.flink.api.common.functions.MapFunction;
  6. import org.apache.flink.streaming.api.datastream.DataStreamSource;
  7. import org.apache.flink.streaming.api.datastream.SingleOutputStreamOperator;
  8. import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;
  9. import org.apache.flink.streaming.api.windowing.assigners.ProcessingTimeSessionWindows;
  10. import org.apache.flink.streaming.api.windowing.time.Time;
  11. /**
  12.  * Author itcast
  13.  * Desc
  14.  * nc -lk 9999
  15.  * 有如下数据表示:
  16.  * 信号灯编号和通过该信号灯的车的数量
  17. 9,3
  18. 9,2
  19. 9,7
  20. 4,9
  21. 2,6
  22. 1,5
  23. 2,3
  24. 5,7
  25. 5,4
  26.  * 需求:设置会话超时时间为10s,10s内没有数据到来,则触发上个窗口的计算(前提是上一个窗口得有数据!)
  27.  */
  28. public class WindowDemo03_SessionWindow {
  29.     public static void main(String[] args) throws Exception {
  30.         //1.env
  31.         StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();
  32.         //2.Source
  33.         DataStreamSource<String> socketDS = env.socketTextStream("node1", 9999);
  34.         //3.Transformation
  35.         //将9,3转为CartInfo(9,3)
  36.         SingleOutputStreamOperator<CartInfo> cartInfoDS = socketDS.map(new MapFunction<String, CartInfo>() {
  37.             @Override
  38.             public CartInfo map(String value) throws Exception {
  39.                 String[] arr = value.split(",");
  40.                 return new CartInfo(arr[0], Integer.parseInt(arr[1]));
  41.             }
  42.         });
  43.         //需求:设置会话超时时间为10s,10s内没有数据到来,则触发上个窗口的计算(前提是上一个窗口得有数据!)
  44.         SingleOutputStreamOperator<CartInfo> result = cartInfoDS.keyBy(CartInfo::getSensorId)
  45.                 .window(ProcessingTimeSessionWindows.withGap(Time.seconds(10)))
  46.                 .sum("count");
  47.         //4.Sink
  48.         result.print();
  49.         //5.execute
  50.         env.execute();
  51.     }
  52.     @Data
  53.     @AllArgsConstructor
  54.     @NoArgsConstructor
  55.     public static class CartInfo {
  56.         private String sensorId;//信号灯id
  57.         private Integer count;//通过该信号灯的车的数量
  58.     }
  59. }

 

文章来源: lansonli.blog.csdn.net,作者:Lansonli,版权归原作者所有,如需转载,请联系作者。

原文链接:lansonli.blog.csdn.net/article/details/116279229

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。