-
大小: 496KB文件類型: .docx金幣: 1下載: 0 次發(fā)布日期: 2021-03-30
- 語(yǔ)言: 其他
- 標(biāo)簽: 大數(shù)據(jù)??spark??
資源簡(jiǎn)介
1. Spark是特性
? 高可伸縮性
? 高容錯(cuò)
? 于內(nèi)存計(jì)算
2. Spark的生態(tài)體系(BDAS,中文:伯利克分析棧)
? MapReduce屬于Hadoop生態(tài)體系之一,Spark則屬于BDAS生態(tài)體系之一
? Hadoop包含了MapReduce、HDFS、HBase、Hive、Zookeeper、Pig、Sqoop等
? BDAS包含了Spark、Shark(相當(dāng)于Hive)、BlinkDB、Spark Streaming(消息實(shí)時(shí)處理框架,類似Storm)等等
3. Spark與MapReduce
優(yōu)勢(shì):
? MapReduce通常將中間結(jié)果放到HDFS上,Spark是基于內(nèi)存
代碼片段和文件信息
評(píng)論
共有 條評(píng)論