如何实现Spark实时统计日志数据并将结果同步到hive
答案:2 悬赏:20 手机版
解决时间 2021-03-22 19:13
- 提问者网友：玫瑰园
- 2021-03-22 07:00
如何实现Spark实时统计日志数据并将结果同步到hive
最佳答案
- 五星知识达人网友：风格不统一
- 2021-03-22 08:30
spark也不是无所不能的啊,提供思路: 直接监听mysql的bin log 然后处理bin log的日志到hdfs上
全部回答
- 1楼网友：你哪知我潦倒为你
- 2021-03-22 09:19
park+shark ,可以直接用hive原来的表。phphiveadmin将hql请求发送给haproxy负载的hive server集群。 三、phphiveadmin读取metadata的数据，注意这里是只读，并不存在对metadata的读写。因为元数据非常重要，涉及到底层数据的正确性，所以不能随意修改。
我要举报
如以上回答内容为低俗、色情、不良、暴力、侵权、涉及违法等信息，可以点下面链接进行举报！
点此我要举报以上问答信息
大家都在看
推荐资讯