hive 导入 mysql文本

栏目: 数据库 · 发布时间: 6年前

内容简介：数据量过大，mysql支持不了。mysql只是个临时方案，最终大数据搭建好了以后，还是需要把mysql的数据，导入到hadoop中。前面提到了另外一种导入方式，请参考：注意：

数据量过大，mysql支持不了。mysql只是个临时方案，最终大数据搭建好了以后，还是需要把 mysql 的数据，导入到hadoop中。

前面提到了另外一种导入方式，请参考： sqoop 从mysql直接导入到hive表 。

1，在hive中创建表

create table `mytest` (
`log_date` int,
`log_time` int,
`aid` string,
`ticket` string
)
 ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' LINES TERMINATED BY '\n' STORED AS TEXTFILE;

2，mysql导出数据

注意： 导出的文本文件，值不要带有双引号，单引号之类的 。例如：

20190114 1547444359 28 aaaaaa
20190115 1547444390 28 bbbbb

3，导入数据到hive中

hive> LOAD DATA (LOCAL) INPATH '/root/mysql.txt' (overwrite) INTO TABLE mytest;

注意：

这里的local是你本机，如果去掉local，会去hdfs里面找。

默认是追加的方式，如果是overwrite，就是覆盖了。

以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，也希望大家多多支持码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。

码农书籍

移动风暴

[美]弗雷德·沃格尔斯坦 / 朱邦芊 / 中信出版社 / 2014-1-1 / 39

也许，除了伟大的乔布斯，每一位奋力改变世界的硅谷英雄，都值得我们肃然起敬。苹果与谷歌十年博弈，关于这场移动平台战争的报道早已铺天盖地，而这是第一次，我们能听到幕后工程师的真实声音。两大科技巨人用智能手机和平板电脑颠覆了电脑产业。它们位处变革的中心，凭借各自的经营哲学、魅力领袖和商业敏感度，把竞争变成了残酷对决。商业记者沃格尔斯坦报道这场对抗已逾十载，在《移动风暴》中，他带领我们来到一间间办公室和会......一起来看看《移动风暴》这本书的介绍吧!

码农工具

Base64 编码/解码

HSV CMYK 转换工具

HSV CMYK互换工具