sqoop2使用

set option --name verbose --value true #打开报错详情输出 Exception has occurred during processing command Exception: org.apache.sqoop.common.SqoopException Message: GENERIC_HDFS_CONNECTOR_0007:Invalid input/output directory - Unexpected exception 解决方法： 安装配置参考的： http://www.cnblogs.com/duking1991/p/6081118.html hadoop的用户代理机制： http://blog.csdn.net/u012948976/article/details/49904675 我配置的代理访问： <property> <name>hadoop.proxyuser. root .hosts</name> <value>*</value> </property> <property> <name>hadoop.proxyuser. root .groups</name> <value>*</value> </property> Caused by: Exception: com.mysql.jdbc.exceptions

以下文字内容部分译自 Sqoop2 vs Sqoop ： Sqoop1是一个客户端程序，用户只需在客户端添加驱动或者连接器到Sqoop中即可使用， Sqoop2是一个基于服务的模型，新一代Sqoop，所有配置以及驱动都必须在服务端配置好。 从MapReduce的观点看，Sqoop1仅仅提交Map程序给集群，而Sqoop2会提交MR任务， 通过Mappper来从源头获取数据，再使用Reducer来转换数据。这相比Sqoop1更加清晰。 另一个主要区别是安全层面。管理员设置好来源和目标的连接，用户无需也不能获取到该连接的信息，只能使用它。这可以进一步做权限控制。 除了传统的CLI之外，Sqoop2也会提供Web UI，它们都使用Sqoop2服务器提供的REST服务。注意一点，Sqoop2的Web UI是Hue的一部分，而非属于Apache基金会。该REST接口可以方便的整合到其它框架中，例如Oozie的工作流中。 Sqoop2目前还是一个半成品亟待完善，且不支持Hadoop1。不多说了，看 文档 、看图说话： 接下来安装Sqoop2： wget -q http://mirror.bit.edu.cn/apache/sqoop/1.99.6/sqoop-1.99.6-bin-hadoop200.tar.gz tar xf sqoop-1.99.6-bin-hadoop200.tar.gz