首页 > 其他分享 >Apache Sqoop安装

Apache Sqoop安装

时间:2023-08-08 17:12:52浏览次数:46  
标签:sqoop Sqoop server sh export env mysql Apache 安装

1.切换到/export/server

2.上传并解压

tar zxvf sqoop-1.4.7.bin__hadoop-2.6.0

3.设置软连接

ln -s sqoop-1.4.7.bin__hadoop-2.6.0 sqoop

4.切换到/sqoop/conf

将sqoop-env-template.sh改名为sqoop-env.sh

mv sqoop-env-template.sh sqoop-env.sh

5.编辑配置文件(sqoop-env.sh)

vim sqoop-env.sh

插入

export HIVE_HOME=/export/server/hive
export HADOOP_MAPRED_HOME=/export/server/hadoop
export HADOOP_COMMON_HOME=/export/server/hadoop

注意:配置的版本号和路径根据自身情况更改

6.添加JDBC驱动

切换到/hive/lib

cd /export/server/hive/lib

复制mysql驱动文件

cp mysql-connector-java-5.1.34.jar /export/server/sqoop/lib/

7.验证

bin/sqoop list-databases \
--connect jdbc:mysql://localhost:3306/ \
--username root \
--password 123456

注:若验证时出现java.lang.NoClassDefFoundError错误:请看Sqoop 连接mysql 错误 java.lang.NoClassDefFoundError

出现mysql中的数据库,配置成功。

标签:sqoop,Sqoop,server,sh,export,env,mysql,Apache,安装
From: https://www.cnblogs.com/ysk0904/p/17614850.html

相关文章

  • Sqoop 连接mysql 错误 java.lang.NoClassDefFoundError(已解决)
    错误信息Exceptioninthread"main"java.lang.NoClassDefFoundError:org/apache/commons/lang/StringUtilsatorg.apache.sqoop.manager.MySQLManager.initOptionDefaults(MySQLManager.java:73)atorg.apache.sqoop.manager.SqlManager.<init......
  • Wordpress:安装谷歌GTM代码出现页面崩溃乱码的原因
    独立站做好之后,需要安装谷歌GTM代码利于数据追踪。但是按照要求装上后,出现了页面乱码。查看代码,发现代码写在body标签之内了, 进入网站后台,使用主题编辑器查看发现低47行尾标有两个>;将GTM代码移出放在>>之后,保存文件刷新即可。 修改后:   ......
  • Jmeter(二十六)Jenkins下载安装教程
    什么是Jenkins?它能做什么?Jenkins是一个开源软件项目,是基于Java开发的一种持续集成工具,用于监控持续重复的工作,旨在提供一个开放易用的软件平台,使软件项目可以进行持续集成。更多介绍可自行百度说一下Jenkins的下载安装及一些简单的配置(一般在公司的话不用自己安装,直接访问公司......
  • TypeChat入门指南:从安装到对话流程设计
    大家好,我是星辰编程理财,这篇文章可以作为TypeChat的入门指南。一、介绍TypeChat是一款基于人工智能技术的对话系统,旨在帮助开发者构建智能机器人,并与用户进行自然语言对话。无论是应用于在线客服、智能助手还是其他领域,TypeChat都能提供强大的对话交互能力,为用户提供优质的用户体验......
  • eclipse安装svn
    一、在线安装打开eclipseMarketplace 搜索svn,点击install,安装subclipse 点击comfirm 选择accept,点击finish,等待安装完成,重启eclipse。 2020.04.22......
  • 在矩池云安装使用PaddleHub 和 PaddlePaddle
    之前在安装PaddleHub导入的时候遇到各种错误,不是这个包没这个模块,就是哪个包没这个属性。。。很头痛,网上也没有PaddleHub和PaddlePaddle对应的版本,只能自己慢慢试,查错误。安装paddlepaddle和paddlehub目前测试下来,最新兼容版本是:paddlehub2.3.1、paddlepaddle-gpu......
  • pip安装加速&&python淘宝镜像安装包
    国内源:新版ubuntu要求使用https源,要注意。清华:https://pypi.tuna.tsinghua.edu.cn/simple阿里云:http://mirrors.aliyun.com/pypi/simple/中国科技大学https://pypi.mirrors.ustc.edu.cn/simple/华中理工大学:http://pypi.hustunique.com/山东理工大学:http://pypi.sdutlinux......
  • 安装好了Java、Neo4j社区版3.5.5,和二者的环境变量后,如何浏览器登录Neo4j
    前提:安装好了Java、Neo4j社区版3.5.5,和二者的环境变量后。Win+R->cmd进入输入neo4j.batconsole回车正常情况下是这样: 不正常情况下是这样:解决办法:输入下图的两句但是记住:neo4jstart一次就要neo4jstop一次,不然会给如下报错:记得neo4jstop就行了 最后......
  • linux安装Jenkins
    Jenkins简介Jenkins是⼀个基于Java语言编写的开源持续集成工具,可⽤于⾃动化与构建、测试、交付或部署软件相关的各种任务.jenkins优点:免费开源、安装运行简单、可跨平台部署、高度可配置、非常多高质量的插件、分布式构建也能高效运行jenkins官网:https://www.jenkins.io/安......
  • eclipse下载安装
    一、下载1.官网下载地址:https://www.eclipse.org/downloads/2.其他镜像下载地址:http://mirror.math.princeton.edu/pub/eclipse/technology/epp/downloads/release/2020-03/R/eclipse-jee-2020-03-R-incubation-win32-x86_64.zip二、安装1.exe文件安装暂无2.zip文件解压到安......