sqoop一些常用命令及参数

youngxuebo youngxuebo     2022-12-01     773

关键词:

常用命令列举

命令说明
importImportTool将数据导入到集群
exportExportTool将集群数据导出
codegenCodeGenTool获取数据库中某张表数据生成Java并打包Jar
create-hive-tableCreateHiveTableTool创建Hive表
evalEvalSqlTool查看SQL执行结果
import-all-tablesImportAllTablesTool导入某个数据库下所有表到HDFS中
jobJobTool用来生成一个sqoop的任务,生成后,该任务并不执行,除非使用命令执行该任务。
list-databasesListDatabasesTool列出所有数据库名
list-tablesListTablesTool列出某个数据库下所有表
mergeMergeTool将HDFS中不同目录下面的数据合在一起,并存放在指定的目录中
metastoreMetastoreTool记录sqoop job的元数据信息,如果不启动metastore实例,则默认的元数据存储目录为:~/.sqoop,如果要更改存储目录,可以在配置文件sqoop-site.xml中进行更改。
helpHelpTool打印sqoop帮助信息
versionVersionTool打印sqoop版本信息

命令&参数详解


1)公用参数:数据库连接

[sqoop]sqoop入门-下载安装运行和常用命令

 一、简介 ApacheSqoopisatooldesignedforefficientlytransferringdatabetweeenstructured,semi-structuredandunstructureddatasources.Relationaldatabasesareexamplesofstructureddatasourceswithwelldefine 查看详情

sqoop快速上手(代码片段)

...连接数据库3、导入数据4、导出数据四、详细参数补充**1常用命令列举****2命令&参数详解****2. 查看详情

转载gcc使用中常用的参数及命令

本文转载自:http://www.cnblogs.com/yaozhongxiao/archive/2012/03/16/2400473.html如需转载,请注明原始出处。谢谢。----------------------------------------------------------------------------------------gcc使用中常用的参数及命令 &nb 查看详情

sqoop的常用命令(代码片段)

...est_hk2.sqoop的数据导入语法:sqoopimport(generic-args)(import-args)常用参数-connectjdbc连接地址--connection-manager连接管理者--driver驱动类--hadoop-mapred-home$HADOOP_MAPRED_HOME--helphelp信息-P从命令行输入密码-m指定maptask的个数,指定maptask的并行度--ta... 查看详情

ubuntu的一些常用命令及疑难杂症

记录ubuntu下各种注意事项及常用命令 1,发热:因为硬件厂商对linux类系统的支持不足,驱动不会自动安装,所以要自己装。。。http://www.linuxidc.com/Linux/2015-04/116450.htm 2,装上chrome后删掉firefoxhttp://jingyan.baidu.com/article/335530da980... 查看详情

cmake用法及常用命令总结

CMakeLists.txt的语法比较简单,由命令、注释和空格组成,其中命令是不区分大小写的。指令是大小写无关的,参数和变量是大小写相关的。但推荐全部使用大写指令。符号#后面的内容被认为是注释。命令由命令名称、小括号和参... 查看详情

一些常用的操作命令及知识点

1.Flume相关:(1)window环境上flume启动命令:  D:apache-flume-1.6.0-binin>路径下,先执行:    java-Dflume.root.logger=INFO,console  再执行:  flume-ng.cmdagent-conf../conf-conf-file../conf/flume.properties-namea1(2)Linu 查看详情

ansible自动化运维之ansible命令运行方式及常用参数和常用模块(代码片段)

Ansible常用模块ansible实现管理的方式演示环境Ad-Hoc执行方式获得帮助ansible命令运行方式及常用参数ansible输出不同颜色含义ansible中的常用模块1.command2.shell3.script4.copy5.fetch6.file7.archive8.unarchive9.hostname10.cron11.yum_repository12.dnf/yum13.s 查看详情

linux基础系统优化及常用命令

#Linux基础系统优化及常用命令[TOC]##Linux基础系统优化Linux的网络功能相当强悍,一时之间我们无法了解所有的网络命令,在配置服务器基础环境时,先了解下网络参数设定命令。-ifconfig  查询、设置网卡和ip等参数-ifup,ifdown脚... 查看详情

composer常用的一些命令参数说明(代码片段)

安装curl-sShttps://getcomposer.org/installer|php或者php-r"readfile(‘https://getcomposer.org/installer‘);"|php全局安装mvcomposer.phar/usr/local/bin/composer安装中国镜像composerconfig-grepo.packagistcomposerhttps://p 查看详情

curl常用参数详解及示例

...S、SMTP、SMTPS、TELNET和TFTP。curl的参数也有很多,下面介绍一些常用的参数,建议收藏保存。当curl不带有任何参数时,curl默认发出GET请求,服务端返回的内容不会做任何解析直接在命令行显示。示例:因为需要跳转到HTTPS,所以... 查看详情

hbaseshell常用命令及例子

下面我们看看HBaseShell的一些基本操作命令,我列出了几个常用的HBaseShell命令,如下:名称命令表达式创建表create‘表名称‘,‘列名称1‘,‘列名称2‘,‘列名称N‘添加记录    put‘表名称‘,‘行名称‘,‘列名称:... 查看详情

ansible使用笔记(二)常用命令使用及常用模块简介

参考技术A目录一、常用命令使用二、双引号""单引号\'\'对执行结果的影响三、ansible-console工具四、ansible常用模块一、常用命令使用前面有提到过ansible的常用的命令和使用列出要执行主机ansibleall--list-hosts批量检测主机ansibleall-mpi... 查看详情

cat命令一些不常用但很有用的参数

-T:把制造符换成^I,该特性对于排除缩进错误非常有用-n:输出时为每行加上行号-b:输出时,跳过空白行并且加上行号本文出自“激情燃烧的岁月”博客,请务必保留此出处http://liuzhengwei521.blog.51cto.com/4855442/1884625 查看详情

ansible自动化运维详解ansible管理方式常用参数及常用模块(代码片段)

...目录ansible自动化运维详解(二)ansible管理方式、常用参数及常用模块一、ansible实现管理的方式二、ansible命令常用参数三、ansible基本颜色代表的信息四、ansible常用模块(1)4.1、command4.2、shell4.3、script4.4、copy4.5... 查看详情

[sqoop]sqoop命令

...概念(1)connector:sqoop2中预定了各种链接,这些链接是一些配置模板。#查看预定制的连接器sqoop:000>showconnector+-- 查看详情

sqoop安装及使用

...把数据从hdfs中导出到关系型数据库中。通过将sqoop的操作命令转化为Hadoop的MapReduce作业进行导入导出,(通常只涉及到Map任务)即sqoop生成的Job主要是并发运行MapTask实现数据并行传输以提升数据传送 查看详情

一些命令的参数作用

man文档有时候看的不太懂,这里就记录一些命令的参数作用,以备查询之用。ls[-aAdfFhilnrRst]ls[--color={never,auto,always}]ls[--full-time]-a :全部的文件,连同隐藏文件(开头为.的文件)一起列出来(常用)-A:列出全部的文件,(连同... 查看详情