什么是flink
flink是一个分布式,高性能,随时可用的以及准确的流处理计算框架,
flink可以对无界数据(流处理)和有界数据(批处理)进行有状态计算(flink天生支持状态计算)的分布式,高性能的计算框架。
架构
下载
官网下载慢,可以用
flink国内镜像
https://mirrors.cloud.tencent.com/apache/flink
或:
有版本下载地址:https://archive.apache.org/dist/flink/
安装
解压
# tar -zxvf flink-1.17.1-bin-scala_2.12.tgz -C /home/softde
102机器
flink-conf.yaml
确定主协调节点,102,0.0.0.0是为了后面其他服务器可以访问他,
下面是配置task,也就是说明它同时也是作为小弟
下面的配置是后面访问UI时的IP,默认是8081
workers
worker是小弟,也就是干事的
masters
master就是jobmanager,现在是一个,也可以搞多个集群
103机器
将上面的内容复制到另一个服务器
rsync 是一种更强大的文件复制工具,它可以在本地和远程之间复制文件,还可以用于备份。它也支持SSH,因此传输是安全的。
从本地复制到远程:
rsync -av /path/to/local/directory/ username@remote_host:/path/to/remote/directory/
从远程复制到本地:
rsync -av username@remote_host:/path/to/remote/directory/ /path/to/local/directory/
小弟服务器要跟着改,就是task的ip
104机器
最后还是有问题,ggggg,mm,,m,,m,m,m,mm,
其他配置
例子
安装telnet
yum -y install telnet
如果需要安装服务端,则可以使用以下命令:
yum -y install telnet-server
先打开sockect端口
然后telnet试下,