mesos、k8s和spark之間的聯系和區別是什么？mesos和k8s之間存在著一種關系。簡而言之，它們之間存在著一種競爭關系。它們用于容器編排，是容器技術的關鍵組件。Mesos比k8s更早問世，曾

mesos、k8s和spark之間的聯系和區別是什么？

mesos和k8s之間存在著一種關系。簡而言之，它們之間存在著一種競爭關系。它們用于容器編排，是容器技術的關鍵組件。Mesos比k8s更早問世，曾在市場上大受歡迎。不過，在谷歌的支持下，k8s很快超越了mesos，擊敗了docker自己的swarm。如今，k8s已成為集裝箱布局的事實標準。

Spark是大數據領域的軟件。它最初是作為Hadoop的競爭對手出現的，現在已經與Hadoop集成。它與mesos和k8s沒有直接關系，如果你不得不說是的話，它們都是開源軟件。

MapReduce和Spark的區別是什么？

MapReduce是Hadoop的分布式計算編程框架

其核心功能是將用戶編寫的邏輯代碼和自己的組件集成到一個程序中，在Hadoop集群上并發運行。核心組件是mrappmaster maptask Reducetask

spark是MapReduce的替代品，兼容HDFS和hive，可以集成到Hadoop生態系統中

它們之間的區別

1。Spark比MapReduce快

基于內存的計算比MapReduce快100多倍

基于硬盤的計算比MapReduce快10多倍

2。Spark支持流媒體和離線計算

MapReduce只支持離線計算

3。MapReduce沒有資源調度系統，它必須在諸如yarn這樣的資源系統上運行

]spark本身集成了資源調度，它可以在自己的主進程和工作進程上運行，也可以以獨立的方式在yarn上運行

空間有限，所以我們先在這里介紹一下，歡迎評論

1行業中的大型模型都是基于logistic回歸和線性回歸的，所以SGD和lbfgs的理解非常重要，并行推導非常重要，要了解LR是如何并行的

2接下來是常見的機器學習算法，比如SVM gbdt KNN，了解原理，能在壓力下快速反應。算法的優缺點和適應場景應基本清晰

3基本算法應熟練掌握數據結構、鏈表二叉樹、快速行合并、動態返回等