sparksql 有没有图形界面

答案:2 悬赏:10 手机版

解决时间 2021-04-03 13:03

提问者网友：藍了天白赴美
2021-04-03 08:18

sparksql 有没有图形界面

最佳答案

五星知识达人网友：持酒劝斜阳
2021-04-03 08:48

Shark和sparkSQL 但是，随着Spark的发展，其中sparkSQL作为Spark生态的一员继续发展，而不再受限于hive，只是兼容hive；而hive on spark是一个hive的发展计划，该计划将spark作为hive的底层引擎之一，也就是说，hive将不再受限于一个引擎，可以采用map- reduce、Tez、spark等引擎。

全部回答

1楼网友：神的生死簿
2021-04-03 09:42

1）过去整个业界对大数据的分析的技术栈的pipeline一般分为以下两种方式： a）data source -> hdfs -> mr/hive/spark（相当于etl）-> hdfs parquet -> spark sql/impala -> resultservice（可以放在db中，也有可能被通过jdbc/odbc来作为数据服务使用）； b）data source -> real timeupdate data to hbase/db -> export to parquet -> spark sql/impala -> resultservice（可以放在db中，也有可能被通过jdbc/odbc来作为数据服务使用）；上述的第二种方式完全可以通过kafka+spark streaming+spark sql（内部也强烈建议采用parquet的方式来存储数据）的方式取代 2）期待的方式：datasource -> kafka -> spark streaming -> parq

我要举报

如以上回答内容为低俗、色情、不良、暴力、侵权、涉及违法等信息，可以点下面链接进行举报！

点此我要举报以上问答信息