1)Spark core:是其它組件的基礎(chǔ),spark的內(nèi)核,主要包含:有向循環(huán)圖、RDD、Lingage、Cache、broadcast等,并封裝了底層通訊框架,是Spark的基礎(chǔ)。 2)SparkStreaming是一個(gè)對實(shí)時(shí)數(shù)據(jù)流進(jìn)行高通量、容錯(cuò)處理的流式處理系統(tǒng),可以對多種數(shù)據(jù)源(如Kdfka、Flume、Twitter、Zero和TCP 套接字)進(jìn)行類似Map、Reduce和Join等復(fù)雜...
www.dbjr.com.cn/it/6988...html 2025-6-10