MR/hive/shark/sparkSQL
生活随笔
收集整理的這篇文章主要介紹了
MR/hive/shark/sparkSQL
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
shark完全兼容hive,完全兼容MR,它把它們替代。類SQL查詢,性能比hive高很多
sparkSQL比shark更快。shark嚴重依賴hive,hive慢,無法優(yōu)化。
SparkSQL和shark最大不同,shark封裝hive,受制于hive底層局限,性能無法優(yōu)化,SparkSQL完全基于Spark,性能超過,Spark2.0最大改善,把SparkSQL作為優(yōu)化中的,比1.5.2更加優(yōu)化,同時SparkSQL完成支持SQL95標(biāo)準(zhǔn)。
轉(zhuǎn)載于:https://www.cnblogs.com/tieandxiao/p/8870218.html
總結(jié)
以上是生活随笔為你收集整理的MR/hive/shark/sparkSQL的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Java中ArrayList和Linke
- 下一篇: python操作数据库 封装类