加入星計(jì)劃，您可以享受以下權(quán)益：

  • 創(chuàng)作內(nèi)容快速變現(xiàn)
  • 行業(yè)影響力擴(kuò)散
  • 作品版權(quán)保護(hù)
  • 300W+ 專業(yè)用戶
  • 1.5W+ 優(yōu)質(zhì)創(chuàng)作者
  • 5000+ 長期合作伙伴
立即加入

Spark

加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點(diǎn)資訊討論

Apache Spark 是專為大規(guī)模數(shù)據(jù)處理而設(shè)計(jì)的快速通用的計(jì)算引擎。Spark是UC Berkeley AMP lab (加州大學(xué)伯克利分校的AMP實(shí)驗(yàn)室)所開源的類Hadoop MapReduce的通用并行框架，Spark，擁有Hadoop MapReduce所具有的優(yōu)點(diǎn)；但不同于MapReduce的是——Job中間輸出結(jié)果可以保存在內(nèi)存中，從而不再需要讀寫HDFS，因此Spark能更好地適用于數(shù)據(jù)挖掘與機(jī)器學(xué)習(xí)等需要迭代的MapReduce的算法。Spark 是一種與 Hadoop 相似的開源集群計(jì)算環(huán)境，但是兩者之間還存在一些不同之處，這些有用的不同之處使 Spark 在某些工作負(fù)載方面表現(xiàn)得更加優(yōu)越，換句話說，Spark 啟用了內(nèi)存分布數(shù)據(jù)集，除了能夠提供交互式查詢外，它還可以優(yōu)化迭代工作負(fù)載。Spark 是在 Scala 語言中實(shí)現(xiàn)的，它將 Scala 用作其應(yīng)用程序框架。

Apache Spark 是專為大規(guī)模數(shù)據(jù)處理而設(shè)計(jì)的快速通用的計(jì)算引擎。Spark是UC Berkeley AMP lab (加州大學(xué)伯克利分校的AMP實(shí)驗(yàn)室)所開源的類Hadoop MapReduce的通用并行框架，Spark，擁有Hadoop MapReduce所具有的優(yōu)點(diǎn)；但不同于MapReduce的是——Job中間輸出結(jié)果可以保存在內(nèi)存中，從而不再需要讀寫HDFS，因此Spark能更好地適用于數(shù)據(jù)挖掘與機(jī)器學(xué)習(xí)等需要迭代的MapReduce的算法。Spark 是一種與 Hadoop 相似的開源集群計(jì)算環(huán)境，但是兩者之間還存在一些不同之處，這些有用的不同之處使 Spark 在某些工作負(fù)載方面表現(xiàn)得更加優(yōu)越，換句話說，Spark 啟用了內(nèi)存分布數(shù)據(jù)集，除了能夠提供交互式查詢外，它還可以優(yōu)化迭代工作負(fù)載。Spark 是在 Scala 語言中實(shí)現(xiàn)的，它將 Scala 用作其應(yīng)用程序框架。收起

查看更多
暫無相關(guān)內(nèi)容，為您推薦以下內(nèi)容
下載
397
  • 智能安全帽_視頻通話|有毒氣體檢測(cè)|生命體征監(jiān)測(cè)智能安全帽頭盔
    下載
    432
  • 汽車24V系統(tǒng)過拋負(fù)載測(cè)試解決保護(hù)方案（小尺寸SMD8S36CA）
    12/28 08:07
    下載
    231
  • 美國電信/AT&T 20W PD快充充電器采用CX7527+CX7538B
    12/28 08:02
    下載
    240
  • 基于51單片機(jī)的計(jì)算器【3位，8255，數(shù)碼管】（仿真）
    12/27 08:41
    下載
    454
  • 聯(lián)發(fā)科MT8768/MTK8768核心板參數(shù)_MTK安卓核心板方案
    下載
    430
  • 嵌入式外設(shè)-BMP280 壓強(qiáng)/溫度/海拔 讀取（BMP280）驅(qū)動(dòng)代碼
    下載
    339
  • 汽車24V供電系統(tǒng)過拋負(fù)載測(cè)試及TVS保護(hù)二極管選型推薦
    12/27 09:18
    下載
    396
  • 【芳心科技】E. 保溫箱溫控系統(tǒng)設(shè)計(jì) 畢業(yè)設(shè)計(jì) 課程設(shè)計(jì) 競(jìng)賽設(shè)計(jì)
    12/27 15:55
    下載
    373
  • 【芳心科技】E. 阿里云智能控制窗簾 畢業(yè)設(shè)計(jì) 課程設(shè)計(jì) 競(jìng)賽設(shè)計(jì)
    12/27 15:53
    下載
    176
  • 【芳心科技】E. Zigbee無線控制智能插座 畢業(yè)設(shè)計(jì) 課程設(shè)計(jì) 競(jìng)賽設(shè)計(jì)
    12/27 15:52
    下載
    363
  • 【芳心科技】E. WIFI智慧農(nóng)業(yè)（LCD12864+ADC+DHT11+DS1302） 畢業(yè)設(shè)計(jì)
    12/27 08:33
    下載
    681
  • 【芳心科技】E. VL53L0X激光測(cè)距 畢業(yè)設(shè)計(jì) 課程設(shè)計(jì) 競(jìng)賽設(shè)計(jì)
    12/27 08:31
    下載
    328
  • 【芳心科技】E. python關(guān)聯(lián)規(guī)則算法圖書借閱系統(tǒng) 畢業(yè)設(shè)計(jì) 課程設(shè)計(jì) 競(jìng)賽設(shè)計(jì)
    12/27 08:29
    下載
    281
  • 綠巨能索尼NP-FW50電池拆解，使用CX8833為相機(jī)供電
    12/27 09:14
    下載
    458
  • CX8871搭配CX2919AC應(yīng)用于1A1C雙口PD快充，最大功率30W
    12/27 09:12
    下載
    304
  • 寶礫微 | USB HUB專用DC-DC方案
    12/27 09:28
    下載
    365
  • 基于51單片機(jī)的電壓源【2擋，LCD1602】（仿真）
    12/26 08:32
    下載
    543
  • 基于51單片機(jī)的消毒器【溫度，消毒，烘干】（仿真）
    12/26 08:20
    下載
    397
  • 記錄儀定制_記錄儀方案_音視頻記錄儀PCBA定制開發(fā)
    下載
    575
  • MTK主板_聯(lián)發(fā)科主板_行業(yè)智能終端安卓主板PCBA定制開發(fā)
    下載
    435
  • 物聯(lián)網(wǎng)畢設(shè) -- 工具分區(qū)提示系統(tǒng)（K210+WIFI+APP）
    下載
    647
  • 小程序 -- uni-app開發(fā)微信小程序環(huán)境搭建（HBuilder X+微信開發(fā)者工具）
    下載
    592
  • RF射頻端口浪涌靜電保護(hù)，陶瓷氣體放電管/TVS二極管如何選型？
    12/26 08:21
    下載
    615

    • 正在努力加載...