ETL异构数据源Datax_datax-web安装部署_10

文章目录

            • 1. 解压
            • 2. 一键安装
            • 3. 修改执行器py地址
            • 4. 一键启动
            • 5. 查看启动日志
            • 6. 访问地址+登录
            • 7. 操作记录

1. 解压
tar -zxvf datax-web-2.1.2.tar.gz
2. 一键安装
# 执行一键安装脚本,系统中需要有mysql环境,会自动执行sql文件初始化bin/install.sh
cd datax-web-2.1.2/
bin/install.sh
3. 修改执行器py地址
# 修改执行器py地址
vim datax-web-2.1.2/modules/datax-executor/bin/env.propertiesPYTHON_PATH=/app/datax/bin/datax.py

在这里插入图片描述

4. 一键启动
cd datax-web-2.1.2/
bin/start-all.sh
5. 查看启动日志
# 查看启动日志
[root@localhost datax-web-2.1.2]# cat datax-web-2.1.2/modules/datax-admin/bin/console.out

在这里插入图片描述

6. 访问地址+登录

http://IP地址:9527/index.html

Local-API:      http://192.xxx.xxx.xxx:9527/doc.html
External-API:   http://192.xxx.xxx.xxx:9527/doc.html
web-URL:        http://192.xxx.xxx.xxx:9527/index.html默认管理员用户名:admin 密码:123456

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

7. 操作记录
# 安装记录
[root@localhost app]# cd datax-web-2.1.2/
[root@localhost datax-web-2.1.2]# bin/install.sh 
2021-06-23 20:28:32.591 [INFO] (4264) Creating directory: [/app/datax-web-2.1.2/bin/../modules].
2021-06-23 20:28:32.600 [INFO] (4264)  ####### Start To Uncompress Packages ######
2021-06-23 20:28:32.606 [INFO] (4264) Uncompressing....
Do you want to decompress this package: [datax-admin_2.1.2_1.tar.gz]? (Y/N)Y
2021-06-23 20:28:35.146 [INFO] (4264)  Uncompress package: [datax-admin_2.1.2_1.tar.gz] to modules directory
Do you want to decompress this package: [datax-executor_2.1.2_1.tar.gz]? (Y/N)Y  # 是否解压datax-executor_2.1.2_1.tar.gz
2021-06-23 20:28:38.606 [INFO] (4264)  Uncompress package: [datax-executor_2.1.2_1.tar.gz] to modules directory
2021-06-23 20:28:38.983 [INFO] (4264)  ####### Finish To Umcompress Packages ######
Scan modules directory: [/app/datax-web-2.1.2/bin/../modules] to find server under dataxweb
2021-06-23 20:28:38.993 [INFO] (4264)  ####### Start To Install Modules ######
2021-06-23 20:28:39.000 [INFO] (4264) Module servers could be installed:[datax-admin]  [datax-executor] 
Do you want to confiugre and install [datax-admin]? (Y/N)Y
2021-06-23 20:28:40.504 [INFO] (4264)  Install module server: [datax-admin]
Start to make directory
2021-06-23 20:28:40.556 [INFO] (4305)  Start to build directory
2021-06-23 20:28:40.564 [INFO] (4305) Creating directory: [/app/datax-web-2.1.2/modules/datax-admin/bin/../logs].
2021-06-23 20:28:40.645 [INFO] (4305) Directory or file: [/app/datax-web-2.1.2/modules/datax-admin/bin/../conf] has been exist
2021-06-23 20:28:40.650 [INFO] (4305) Creating directory: [/app/datax-web-2.1.2/modules/datax-admin/bin/../data].
end to make directory
Start to initalize database
2021-06-23 20:28:40.738 [INFO] (4305)  Scan out mysql command, so begin to initalize the database
Do you want to initalize database with sql: [/app/datax-web-2.1.2/bin/db/datax_web.sql]? (Y/N)Y
Please input the db host(default: 127.0.0.1): 
Please input the db port(default: 3306): 
Please input the db username(default: root): 
Please input the db password(default: ): 123456
Please input the db name(default: dataxweb)
mysql: [Warning] Using a password on the command line interface can be insecure.
Do you want to confiugre and install [datax-executor]? (Y/N)Y
2021-06-23 20:28:53.985 [INFO] (4264)  Install module server: [datax-executor]
2021-06-23 20:28:54.039 [INFO] (4355)  Start to build directory
2021-06-23 20:28:54.045 [INFO] (4355) Creating directory: [/app/datax-web-2.1.2/modules/datax-executor/bin/../logs].
2021-06-23 20:28:54.129 [INFO] (4355) Directory or file: [/app/datax-web-2.1.2/modules/datax-executor/bin/../conf] has been exist
2021-06-23 20:28:54.134 [INFO] (4355) Creating directory: [/app/datax-web-2.1.2/modules/datax-executor/bin/../data].
2021-06-23 20:28:54.216 [INFO] (4355) Creating directory: [/app/datax-web-2.1.2/modules/datax-executor/bin/../json].
2021-06-23 20:28:54.291 [INFO] (4264)  ####### Finish To Install Modules #######  修改执行器py地址
[root@localhost datax-web-2.1.2]# vim modules/datax-executor/bin/env.properties # 启动记录:
[root@localhost datax-web-2.1.2]# bin/start-all.sh 
2021-06-23 20:44:25.429 [INFO] (5663)  Try To Start Modules In Order 
2021-06-23 20:44:25.444 [INFO] (5671)  ####### Begin To Start Module: [datax-admin] ######
2021-06-23 20:44:25.462 [INFO] (5679) load environment variables
2021-06-23 20:44:25.912 [INFO] (5679) java
2021-06-23 20:44:25.919 [INFO] (5679) Waiting DATAX-ADMIN to start complete ...
2021-06-23 20:44:26.193 [INFO] (5679) DATAX-ADMIN start success
2021-06-23 20:44:26.211 [INFO] (5886)  ####### Begin To Start Module: [datax-executor] ######
2021-06-23 20:44:26.228 [INFO] (5894) load environment variables
2021-06-23 20:44:26.887 [INFO] (5894) java
2021-06-23 20:44:26.893 [INFO] (5894) Waiting DATAX-EXEXUTOR to start complete ...
2021-06-23 20:44:27.334 [INFO] (5894) DATAX-EXEXUTOR start success# 查看启动日志
[root@localhost datax-web-2.1.2]# cat modules/datax-admin/bin/console.out

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/517925.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

3D 真的很难吗,瞧瞧支付宝怎么做?

阿里妹导读:图像作为人类感知世界的视觉基础,是我们在这个信息化时代获取信息、表达信息及传递信息的重要手段,而生成图像最高效准确的方式就是由计算机生成、显示、绘制,这些技术又统称计算机图形技术。计算机图形技术已经是许多…

OpenStack发布Ussuri版本 实现智能开源基础设施的自动化

从2010年到2020年,OpenStack项目整整走过了十个春夏秋冬。10年来,关于OpenStack的争议持续不断,但不可否认的是,在不同技术路线的争执中,OpenStack所展现的蓬勃生命力仍无可比拟。据451研究机构2019年9月发布的市场监测…

ETL异构数据源Datax_图形化数据同步_11

数据同步全量增量知识SQL和执行频次不一样,其他的都一样 文章目录一、Oracle同步Mysql(全量)1. 添加项目2. 添加数据源3. 添加任务4. 构建json5. 任务执行6. 查看日志7. 同步数量对比二、Mysql同步Oracle(全量)2.1. 添加构建reader2.2. 添加构建writer2.3. 配置同步…

RocketMQ消息轨迹-设计篇

RocketMQ 消息轨迹主要包含两篇文章:设计篇与源码分析篇,本节将详细介绍RocketMQ消息轨迹-设计相关。 RocketMQ消息轨迹,主要跟踪消息发送、消息消费的轨迹,即详细记录消息各个处理环节的日志,从设计上至少需要解决如…

红帽加速开放混合云创新,助力企业成功迈向开源应用时代

2020年的开局让人有些意想不到,一场新冠疫情给人们的生活带来了前所未有的改变。对于企业更是有着数不尽的困难与挑战。在过去的三个月当中,全世界都面临着有关于“虚拟会议”所带来的便捷与隐患问题,原因在于虚拟会议中对于网络体验与安全的…

ETL异构数据源Datax_自增ID增量同步_12

文章目录增量同步方法 1.先同步存量数据 2.再同步增量数据(根据自增ID、日期条件) 前提条件: 1.只针对数据增长,如果老数据被update/delete则无法使用增量同步方式。 基于主键自增ID增量同步 Oracle同步Mysql演示 idno采用序列自增 添加项目 AutoIncr…

K8S从懵圈到熟练 - 节点下线姊妹篇

之前分享过一例集群节点NotReady的问题。在那个问题中,我们的排查路劲,从K8S集群到容器运行时,再到sdbus和systemd,不可谓不复杂。那个问题目前已经在systemd中做了修复,所以基本上能看到那个问题的几率是越来越低了。…

PLSQL 查询结果只显示年月日不显示时分秒的解决方法

PLSQL 14查询结果只显示年月日不显示时分秒的解决方法 如果plsql里面日期显示出现混乱,并且按照一般的调整首选项里日期格式调整不了,可以修改环境变量,新建环境变量,变量名:nls_date_format 变量值:YYYY-…

阿里云“网红“运维工程师白金:做一个平凡的圆梦人

他是阿里云的一位 P8 运维专家,却很有野心得给自己取花名“辟拾(P10)”; 他没有华丽的履历,仅凭着 26 年的热爱与坚持,一步一个脚印踏出了属于自己的技术逆袭之路; 他爱好清奇,练就了…

巧用 Trie 树,实现搜索引擎关键词提示功能

来源 | 码海责编 | Carol封图 | CSDN 付费下载于视觉中国我们几乎每天都在用搜索引擎搜索信息,相信大家肯定有注意过这样一个细节:当输入某个字符的时候,搜索引框底下会出现多个推荐词,如下,输入「python」后,底下会出…

这一团糟的代码,真的是我写的?!

阿里妹导读:你有没有遇到过这种情况:过几周或者几个月之后,再看到自己写的代码,感觉一团糟,不禁怀疑人生?我们每天都与代码打交道,但当被问道什么是好的代码时,很多人可能会先愣一下…

迅雷下载Linux Oracle11gR2和Oracle12c

很多朋友分享的都是百度云盘链接,那个下载速度对于贫民来说,真的是等到花都谢了 而Oracle官网现在只能下载Oracle19C了,特此分享11和12版本的迅雷下载链接 11g下载链接: https://download.oracle.com/otn/linux/oracle11g/R2/lin…

除了吃月饼,中秋节还能干啥?

明天 八月十五,团圆夜 花好月圆之际 除了吃月饼,还能干啥? 阿里妹带来双重好礼,陪你过中秋~ (往下看,送云栖大会三日通票哦) 1重礼 — 阿里技术热门精选 — 《Java 开发手册》发布&#…

恭喜了!5 月逼自己学下这项技能,年薪 35 万起

你觉得 15 年内自己所在的 IT 行业很安全吗?No!据麦肯锡全球研究院发布的一份就业报告中显示,到 2030 年,中国预计将有 1200 万~ 1.02 亿人面临重新就业的局面。越来越多的人学习编程不再只是为了当程序员,…

Linux7/Redhat7/Centos7 安装Oracle 12C_系统安装_01

文章目录一、安装虚拟机1. 新建虚拟机2. 稍后安装3. 选择linux版本4. 安装位置5. 处理器配置6. 内存配置7. 网络配置8. 创建新磁盘9. 设置磁盘大小10. 选择镜像,完成二、虚拟机配置2.1. 重新启动2.2. 选择语言2.3. 设置时区2.4. 选择安装模式2.5. 自定义分区2.6. 接…

源码分析RocketMQ ACL实现机制

有关RocketMQ ACL的使用请查看上一篇《RocketMQ ACL使用指南》,本文从源码的角度,分析一下RocketMQ ACL的实现原理。 备注:RocketMQ在4.4.0时引入了ACL机制,本文代码基于RocketMQ4.5.0版本。 根据RocketMQ ACL使用手册&#xff0c…

Linux7/Redhat7/Centos7 安装Oracle 12C_配置IP、系统参数_02

文章目录一、基础配置1. 重新启动2. 安装VMware Tools3. 修改主机名4. 网络配置5. 重新加载网络二、配置系统参数2.1. 检查硬件环境2.2. 查看共享内存大小2.3. 创建用户和组2.4. 配置内核参数2.5. 配置资源限制2.6. 创建目录赋予权限2.7. 设置环境变量2.8. 映射配置三、基础关闭…

华为:跨过时艰,向未来

[中国,深圳,2020年5月18日] 华为公司第十七届全球分析师大会18日在深圳开幕。华为与来自全球的2000多名行业分析师,金融分析师,通讯、互联网、金融等行业意见领袖和媒体一起,以现场在线的方式,共同探讨在当…

阿里巴巴飞天大数据架构体系与Hadoop生态系统

很多人问阿里的飞天大数据平台、云梯2、MaxCompute、实时计算到底是什么,和自建Hadoop平台有什么区别。 先说Hadoop 什么是Hadoop? Hadoop是一个开源、高可靠、可扩展的分布式大数据计算框架系统,主要用来解决海量数据的存储、分析、分布式…

Linux7/Redhat7/Centos7 安装Oracle 12C_配置VNC远程安装数据库_03

文章目录1. yum安装VNC2. 在线安装时钟3. VNC配置4. 重新加载5. 加入开机自启动6. 启动vncserver7. vnc测试1. yum安装VNC # 在线安装vnc yum install tigervnc-server2. 在线安装时钟 # 在线安装时钟为了测试远程连接oracle主服务器图形化 yum install xclock3. VNC配置 # …