徽标
联盟百科
通讯
下载应用,请到 Google Play
新! 在您的Android™设备上下载联盟百科!
自由
比浏览器更快的访问!
 

Apache Spark和最优化

快捷方式: 差异相似杰卡德相似系数参考

Apache Spark和最优化之间的区别

Apache Spark vs. 最优化

Apache Spark是一個開源叢集運算框架,最初是由加州大學柏克萊分校AMPLab所開發。相對於Hadoop的MapReduce會在執行完工作後將中介資料存放到磁碟中,Spark使用了記憶體內運算技術,能在資料尚未寫入硬碟時即在記憶體內分析運算。Spark在記憶體內執行程式的運算速度能做到比Hadoop MapReduce的運算速度快上100倍,即便是執行程式於硬碟時,Spark也能快上10倍速度。Spark允許用戶將資料加載至叢集記憶體,並多次對其進行查詢,非常適合用於機器學習演算法。 使用Spark需要搭配叢集管理員和分散式儲存系統。Spark支援獨立模式(本地Spark叢集)、Hadoop YARN或Apache Mesos的叢集管理。 在分散式儲存方面,Spark可以和HDFS、 Cassandra 、OpenStack Swift和Amazon S3等介面搭載。 Spark也支援偽分散式(pseudo-distributed)本地模式,不過通常只用於開發或測試時以本機檔案系統取代分散式儲存系統。在這樣的情況下,Spark僅在一台機器上使用每個CPU核心執行程序。 在2014年有超過465位貢獻家投入Spark開發,讓其成為Apache軟體基金會以及巨量資料眾多開源專案中最為活躍的專案。. 最优化,是应用数学的一个分支,主要研究以下形式的问题:.

之间Apache Spark和最优化相似

Apache Spark和最优化有(在联盟百科)0共同点。

上面的列表回答下列问题

Apache Spark和最优化之间的比较

Apache Spark有19个关系,而最优化有38个。由于它们的共同之处0,杰卡德指数为0.00% = 0 / (19 + 38)。

参考

本文介绍Apache Spark和最优化之间的关系。要访问该信息提取每篇文章,请访问:

嘿!我们在Facebook上吧! »