国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 學院 > 開發(fā)設(shè)計 > 正文

跟天齊老師學Spark（2）--spark基礎(chǔ)概念

2019-11-11 04:29:13
字體：大 中 小
供稿：網(wǎng)友
spark基礎(chǔ)概念：2014年才成為Apache的頂級項目，距今才兩年。但是發(fā)展迅速。spark是基于內(nèi)存的計算，現(xiàn)在搞spark的，現(xiàn)在內(nèi)存都不是問題，騰訊現(xiàn)在的集群達到上萬臺，每臺機器都是100多G的內(nèi)存。內(nèi)存不夠還可以落磁盤。spark的優(yōu)點：中間結(jié)果可以在內(nèi)存中，而MaPReduce中間結(jié)果落磁盤。spark是hadoop的一個替代方案，但是它只能替代MapReduce。可以很好的融入到hadoop的生態(tài)系統(tǒng)中，彌補MapReduce的不足。開發(fā)spark最好使用scala語言，因為spark就是用scala開發(fā)的。但是市面上仍然有很多公司用java來開發(fā)spark的。考慮到人力成本、技術(shù)成本、維護成本。

發(fā)表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發(fā)表
主站蜘蛛池模板： 高安市| 平阳县| 称多县| 上饶县| 安宁市| 德庆县| 麦盖提县| 贵阳市| 乌兰县| 广南县| 张家口市| 庆安县| 塔河县| 平遥县| 南投市| 囊谦县| 胶南市| 台湾省| 大庆市| 洛川县| 安阳市| 玉溪市| 满洲里市| 布尔津县| 巧家县| 祁连县| 抚宁县| 响水县| 汤原县| 滨海县| 且末县| 集贤县| 太仓市| 嘉鱼县| 沭阳县| 靖远县| 绥江县| 泸水县| 邢台市| 遂川县| 民权县|