您好,登錄后才能下訂單哦!
這篇文章主要講解了“怎么用Flink Min獲取一組數據流中最小的值”,文中的講解內容簡單清晰,易于學習與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學習“怎么用Flink Min獲取一組數據流中最小的值”吧!
min聚合:獲取一組數據流中最小的值(和max相反)
示例環境
java.version: 1.8.xflink.version: 1.11.1
示例數據源 (項目碼云下載)
Flink 系例 之 搭建開發環境與數據
Min.java
import com.flink.examples.DataSource; import org.apache.flink.api.common.functions.MapFunction; import org.apache.flink.api.common.typeinfo.Types; import org.apache.flink.api.java.functions.KeySelector; import org.apache.flink.api.java.tuple.Tuple2; import org.apache.flink.api.java.tuple.Tuple3; import org.apache.flink.streaming.api.datastream.DataStream; import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment; import java.util.List; /** * @Description min聚合:獲取一組數據流中最小的值(和max相反) */ public class Min { /** * 遍歷集合,返回每個性別分區下最小年齡 * @param args * @throws Exception */ public static void main(String[] args) throws Exception { final StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); List<Tuple3<String, String, Integer>> tuple3List = DataSource.getTuple3ToList(); DataStream<Tuple2<String, Integer>> dataStream = env.fromCollection(tuple3List) .map(new MapFunction<Tuple3<String, String, Integer>, Tuple2<String, Integer>>() { @Override public Tuple2<String, Integer> map(Tuple3<String, String, Integer> tuple3) throws Exception { return new Tuple2<>(tuple3.f1,tuple3.f2); } }) .returns(Types.TUPLE(Types.STRING,Types.INT)) .keyBy((KeySelector<Tuple2<String, Integer>, String>) k ->k.f0) //按數量窗口滾動,每3個輸入數據流,計算一次 .countWindow(3) .min(1); dataStream.print(); env.execute("flink Min job"); } }
打印結果
2> (man,20) 4> (girl,18)
感謝各位的閱讀,以上就是“怎么用Flink Min獲取一組數據流中最小的值”的內容了,經過本文的學習后,相信大家對怎么用Flink Min獲取一組數據流中最小的值這一問題有了更深刻的體會,具體使用情況還需要大家實踐驗證。這里是億速云,小編將為大家推送更多相關知識點的文章,歡迎關注!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。