Flink之DataStream Source、DataSet Source

最新推荐文章于 2024-11-06 09:58:55 发布

11号车厢

最新推荐文章于 2024-11-06 09:58:55 发布

阅读量359

点赞数

CC 4.0 BY-SA版权

分类专栏： Flink 文章标签： Flink

本文链接：https://blog.csdn.net/greenplum_xiaofan/article/details/99463307

本文探讨了Apache Flink中的DataStream API，它专注于流处理，而DataSet API则适用于批处理任务。了解这两种API在Flink中的应用和区别对于有效地进行数据处理至关重要。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

DataStream API 是用于进行Stream流计算开发的API

//DataStream  env  入口
//流处理，最后是需要execute执行
val env=StreamExecutionEnvironment.getExecutionEnvironment

DataSet API 是用于进行Batch计算开发的API

//DataSet  env入口
//批式处理最后没有execute
val env2=ExecutionEnvironment.getExecutionEnvironment

package com.ruozedata.flink

import org.apache.flink.api.scala._
import org.apache.flink.configuration.Configuration
import org.apache.flink.streaming.api.scala.StreamExecutionEnvironment

object SourceApp {
   
   
  def main(args: Array[String]): Unit = {
   
   
    val env=StreamExecutionEnvironment.getExecutionEnvironment
    val env2=ExecutionEnvironment.