永发信息网

如何让hive更新hdfs里的数据

答案:2  悬赏:40  手机版
解决时间 2021-03-23 09:44
  • 提问者网友:心牵心
  • 2021-03-22 18:39
如何让hive更新hdfs里的数据
最佳答案
  • 五星知识达人网友:独行浪子会拥风
  • 2021-03-22 18:52
hive load数据只是单纯的把文件拷贝到hdfs的相应目录下面,并不作格式检查和解析
只有在查询数据的时候,才会根据创建表时定义的序列化方式解析数据
建表的时候可以指定分隔符

create table test(t1 String,t2 String,t3 String,t4 String,t5 String,t6 String,t7 String,t8 String,t9 String,t10 String)
row format delimited fields terminated by '\|'
全部回答
  • 1楼网友:玩家
  • 2021-03-22 19:31
hive的数据是无法更新的,除非去更改hdfs的原始文件,更改原始文件需要生成一个新的文件,十分费事。同时hive是进行海量数据统计分析,无法实时查询。 而hbase可以进行数据更新和海量数据的快速查询,弥补hive的不足,同时hbase的语法简直蛋疼,无法友好的进行数据的统计分析,但是hive可以。 所以hive和hbase整合后,数据更新,实时查询已经统计分析都可以。大致就是这么个原因
我要举报
如以上回答内容为低俗、色情、不良、暴力、侵权、涉及违法等信息,可以点下面链接进行举报!
点此我要举报以上问答信息
大家都在看
推荐资讯