最近在用sqoop做数据迁移的时候,发现Hive中的数据突然多了几条,为什么多了几条呢?百思不得其解,后来,经过查询,用sqoop将数据导入到Hive的时候,有时候默认会有个空格,导致一条数据变成了几行,ok,我回去再查询数据的时候,果然,确实出现了换行的问题,我就不截图了,问题找到了,那就找解决方案吧!
2.解决方案 我使用的是下面这一句 :
据说能够去掉全部的n , t , and 1字符,我这面的问题是可以解决掉的,如果你也遇到同样的问题,可以试试看!
我的解决方案是参考下面的链接 ,已贴!
参考链接:
http://stackoverflow.com/questions/28076200/hive-drop-import-delims-not-removing-newline-while-using-hcatalog-in-sqoop