首页 > 系统相关 >centos7.9安装部署datax和dataxweb

centos7.9安装部署datax和dataxweb

时间:2023-05-16 17:22:56浏览次数:36  
标签:bin centos7.9 datax mysql HOME dataxweb password rpm

安装包,里面有mysql、jdk、datax、datax-web的安装包全部下载

链接:https://pan.baidu.com/s/1ESNn2Y71vq5SlOnypaUloA
提取码:cuto

1、安装jdk(jdk1.8)

#把jdk上传解压
#配置环境变量
vim /etc/profule
#把JAVA_HOME改成自己的jdk地址
#jdk
export JAVA_HOME=/usr/local/java/jdk1.8.0_221
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export CANAL_SERVER_HOME=/usr/local/canal/deployer
export PATH=$CANAL_SERVER_HOME/bin:$PATH

2、安装mysqk(mysql5.7)

#上传mysql的rpm包解压
#卸载服务器原有的mariadb否则后面安装mysql会出现问题
#查看是否有安装这个 
 rpm -qa | grep mariadb
#如果有就直接卸载 
 rpm -e mariadb-libs-5.5.64-1.el7.x86_64 --nodeps
#下面就是安装mysql的rpm包了
 rpm -ivh mysql-community-common-5.7.28-1.el7.x86_64.rpm
 rpm -ivh mysql-community-libs-5.7.28-1.el7.x86_64.rpm
 rpm -ivh mysql-community-client-5.7.28-1.el7.x86_64.rpm
 yum install -y net-tools
 yum install libaio -y
 rpm -ivh mysql-community-server-5.7.28-1.el7.x86_64.rpm
#至此mysql安装完成
#启动mysql服务
systemctl start mysqld
#查看是否启动
systemctl status mysqld
#查找初始密码
 grep password /var/log/mysqld.log
#2020-12-16T07:47:14.117739Z 1 [Note] A temporary password is generated forroot@localhost: pVLJs6&o(QQe  类似后面这个密码
#登录mysql
mysql -uroot -p
#输入上面查找的这个密码
#登录之后修改密码这里附带修改mysql的密码策略
set global validate_password_policy=LOW; 
set global validate_password_length=4; 
set global validate_password_mixed_case_count=0; 

set global validate_password_number_count=0; 
set global validate_password_special_char_count=0; 
#修改密码
alter user root@localhost identified by '123456';
#远程授权
grant all privileges on *.* to 'root'@'%' identified by '123456' with grant option;

3、安装datax

#上传安装包解压
#进入datax的目录下/bin下
python datax.py ../job/job.json
#如果这一步报错了,那就删除一下数据
rm -rf /usr/local/datax/plugin/*/._*    
#若出现以下文字说明安装成功
2022-04-24 17:21:04.845 [job-0] INFO  JobContainer - 
任务启动时刻                    : 2022-04-24 17:20:54
任务结束时刻                    : 2022-04-24 17:21:04
任务总计耗时                    :                 10s
任务平均流量                    :          253.91KB/s
记录写入速度                    :          10000rec/s
读出记录总数                    :              100000
读写失败总数                    :                   0

4、安装datax-web

#上传安装包解压
#进入到datax-web的bin下
./install.sh
#按照提示输入mysql的账户密码以及库(库可以不存在)

#指定PYTHON_PATH路径(这里改为你相应的路径即可)
#/usr/local/datax-web-2.1.2/modules/datax-executor/bin/env.properties
PYTHON_PATH=/usr/local/datax/bin/datax.py
#如果需要变更端口可以修改(默认是9527)
DATAX_ADMIN_PORT=9527
#如果都配置完成之后就可以启动web以及datax执行器
#在datax-web的bin目录下可以执行启动脚本
./start-all.sh
#注意启动之后输出jps查看进程
jps
#发现至少是有两个datax的进程
8945 DataXAdminApplication
9209 DataXExecutorApplication
#然后打开浏览器输入网址
http://ip地址:9527/index.html
#初始账号为admin密码为123456

标签:bin,centos7.9,datax,mysql,HOME,dataxweb,password,rpm
From: https://www.cnblogs.com/Fengdengshuai/p/17406255.html

相关文章

  • centos7.9部署LNMP
    系统设置创建应用目录mkdir-pv/data/apps系统更新yum-yupdatelimits.confcat>>/etc/security/limits.conf<<EOFrootsoftcoreunlimitedroothardcoreunlimitedrootsoftnproc1000000roothardnproc1000000rootsoftnofile100000roothardnofile......
  • Linux(centos7.9)搭建DNS服务器
    一.DNS是什么 后期更新,目前只介绍服务器的搭建 二.linux搭建DNS服务器(目前只支持正向解析)以下服务器信息为该文档安装DNS服务环境 服务器信息:CentOS7  内核版本:3.10.0-1160.el7.x86_64 2.1 使用yum进行安装yuminstall-ybindbind-utils2.2安装完成后,查看......
  • Linux(centos7.9)搭建ldap服务器
    一.LDAP是什么 后期更新,目前只搭建了服务器 二.linux搭建LDAP服务器以下服务器信息为该文档安装Radius服务环境 服务器信息:CentOS7  内核版本:3.10.0-1160.el7.x86_64 1.使用yum进行安装yum-yinstallopenldapcompat-openldapopenldap-clientsopenldap-serv......
  • datax_v202303 编译和使用
    下载源码gitclonehttps://github.com/alibaba/DataX.git#查看taggittaggitcheckoutdatax_v202303安装无法下载的jar到本地仓库下载地址pentaho-aggdesigner-algorithm-5.1.5-jhyde.jarhttps://github.com/xiaohaibaba/share_jar/raw/main/pentaho-aggdesigner-algor......
  • 01. k8s1.15.1高可用版本(docker引擎,Centos7.9)
    1.软件版本首先要把centos7系统的内核升级最好4.4以上(默认3.10的内核,运行大规模docker的时候会有bug)软件/系统版本备注Centos7.9最小安装版k8s1.15.1flannel0.11etcd3.3.102.角色分配k8s角色主机名节点IP备注master1+etcd1mas......
  • DataX-在Windows上实现postgresql同步数据到mysql
    场景DataX-阿里开源离线同步工具在Windows上实现Sqlserver到Mysql全量同步和增量同步:https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/130330353在上面实现sqlserver到mysql的数据同步之后,如果要实现postgresql到mysql数据同步流程一样。以PostGis中的OGC元数据......
  • Centos7.9安装JDK1.8
    卸载Centos自带JDK卸载系统自带的JDK;通过以下命令查看是否已经安装JDKyumlistinstalled|grepjava或者如下命令都可以查看到是否安装了JDKwhereisjavafind/-namejava如图:  如果安装了则通过以下命令进行删除:yum-yremovejava安装JDK下面通过两种方......
  • DataX-阿里开源离线同步工具在Windows上实现Sqlserver到Mysql全量同步和增量同步
    场景Kettle-开源的ETL工具集-实现SqlServer到Mysql表的数据同步并部署在Windows服务器上:https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119891674上面讲过Kettle的使用,下面记录下阿里开源异构数据源同步工具DataXDataXDataX是一个异构数据源离线同步工具,致力......
  • CentOS7.9 安装 RabbitMQ
    官方安装文档https://www.rabbitmq.com/install-rpm.html一、rpm包下载1.下载erlanghttps://packagecloud.io/rabbitmq/erlang/packages/el/7/erlang-23.3.4.11-1.el7.x86_64.rpm?distro_version_id=140wget--content-disposition"https://packagecloud.io/rabbitmq/erl......
  • Centos7.9仅安装mysql8客户端工具
    说明这里的方式是通过MYSQL官网下载包进行安装Mysql客户端,直接使用yum的安装方式没试过,安装命令yuminstallmysql-devel。mysql客户端安装需要在官网上下载4个包,这里以8.0.25版本为例,要下载的包如下:mysql-community-commonmysql-community-client-pluginsmysql-community-......