基于Flink CDC实现Mysql实时同步到Doris系列教程一:Flink环境的部署

前面为大家介绍了Flink CDC,我们已经知道Flink CDC 是一个基于流的数据集成工具。

本文开始,将会手把手的带领大家动手完成把Mysql的数据实时同步到Doris中,有兴趣的同学可以持续关注本系列教程。

Flink环境的部署

系列教程采用本地模式安装,本系列开发环境为Windows + WSL。

  1. 检查Java环境

Flink需要依赖java环境,部署Flink前需要检查本地是否已经具备Java环境(没有Java环境的请自行查阅资料完成)。

  1. 下载Flink并解压

Flink下载地址:https://flink.apache.org/zh/downloads/

选择最新版本的Flink,点击进入下载界面。

复制下载地址。

使用命令wget https://dlcdn.apache.org/flink/flink-1.19.0/flink-1.19.0-bin-scala_2.12.tgz完成下载。

使用命令tar -xzvf flink-1.19.0-bin-scala_2.12.tgz完成解压。

使用命令cd flink-1.19.0进入到项目根目录下。

  1. 启动本地集群

Flink 附带了一个 bash 脚本,可以用于启动本地集群。

在Flink项目根目录下,使用命令./bin/start-cluster.sh启动本地集群。

  1. 访问Flink的Web UI

在浏览器中访问地址:http://localhost:8081/,出现如上图界面,则代表我们完成了Flink环境的部署。

  1. 停止集群

使用命令./bin/stop-cluster.sh可以用于停止集群。

至此,我们就完成了Flink环境的部署。

欢迎关注后续系列教程。

Flink进阶

Apache Flink 是一个在有界数据流和无界数据流上进行有状态计算分布式处理引擎和框架。

Flink已经成为实时数据处理的首选开源技术,如果您对Flink有兴趣,想要进一步学习Flink技术,可以关注:遇码,回复flink,获取官方中文文档。

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值