Sqoop2使用方法简介
1.sqoop2-shell 进入 shell
2.showconnector 显示支持的连接方式
3.show link -all 查看已有连接的信息
inkwithid1andname.168.1.188-1464317401319(Enabled:true,CreatedbyAdministratorat5/27/1610:50AM,UpdatedbyAdministratorat5/27/1610:50AM)
UsingConnectorgeneric-jdbc-connectorwithid4
Linkconfiguration
JDBCDriverClass:com.mysql.jdbc.Driver
JDBCConnectionString: ****************************************
Username:
Password:
JDBCConnectionProperties:
4. create link -c 4 表示创建基于connector4 的link
创建的时候要输入步骤3显示的信息
5create job -f -t
-f 从哪个link
-t 到哪个link
(schema name,table name )和 table sql statement 是互斥的只能写其中一个
table sql statement 要写${CONDITIONS}
check column 和last value 两个参数用作增量更新
这里选择普通文件(TEXT_FILE)和不压缩(NONE)的方式进行导入,方便查看导入文件
创建成功会返回id
用show job -jid 18 查看job,id为18的详细信息
6.如果报错,想要显示具体的错误信息,可以执行下列语句。
sqoop:000>setoption-nameverbose-valuetrue
Verboseoptionwaschangedtotrue
设置前
设置后,可以在报错信息中查看具体错误信息并排查。
startjob-jid18-s
-s:表示实时显示job的执行进度,默认不写的话,只会显示到job开始
7statusjob-jid18
显示 id为18的job的执行状态
显示执行成功
8.查看Hdfs控制台
表明已经导入成功,如果还不放心 可以用
hadoop dfs -cat /tmp/xktest/文件名
来查看文件具体内容是否和表中的相同。
声明:本站所有文章资源内容,如无特殊说明或标注,均为采集网络资源。如若本站内容侵犯了原著者的合法权益,可联系本站删除。