Spark Stream 流式处理
生活随笔
收集整理的這篇文章主要介紹了
Spark Stream 流式处理
小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
總結(jié):
- Spark的核心數(shù)據(jù)結(jié)構(gòu)是RDD(彈性分布式數(shù)據(jù)集)
- Spark Streaming 采用微批處理模式,保證消息傳輸精準(zhǔn)性,采用checkpoint方式保證可靠性,具有良好的吞吐性能,延時(shí)表現(xiàn)非真正實(shí)時(shí)
- Spark Streaming 可以接收Kafka和HDFS等在內(nèi)的多種數(shù)據(jù)源,批量處理后,輸出到HDFS、數(shù)據(jù)庫或文件系統(tǒng)
總結(jié)
以上是生活随笔為你收集整理的Spark Stream 流式处理的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: CB官方推荐AP英语文学与写作必读书目,
- 下一篇: 面向大规模图像检索的层次语义索引