Hadoop支持用python開發嗎？還有哪些支持python的分布式計算系統框架？Hadoop支持python。我的理解是，任務通過yarn分配到工作節點，并通過shell調用。這種方法比原生Mr速

Hadoop支持用python開發嗎？還有哪些支持python的分布式計算系統框架？

Hadoop支持python。我的理解是，任務通過yarn分配到工作節點，并通過shell調用。這種方法比原生Mr速度慢，因此沒有得到廣泛的應用。

Spark應該是Python的友好框架。要說缺點，畢竟是Scala或Java風格的API，這對于Python是不夠的。在使用了panda和numpy之后，我覺得spark的API是比較基本的。

此外，python建議您學習dask和芹菜。Dask基于numpy和panda進行封裝，兼容大多數NP和PD接口。它還支持分布式和可視化界面。總的來說，這是個不錯的選擇。

作為一個分布式任務調度框架，cellery并不是專門為ETL設計的，所以它的性能比dask差。但我覺得作為一個生產體系，芹菜比較穩定。

Python和大數據有什么區別，學哪個以后好就業？

Python是一種新的編程語言，類似于C#，大數據是一種大規模的數據集，如海量圖像。大數據技術是指獲取、存儲、分析和管理大數據的技術的總稱。基于Python和tensorflow，可以對圖像大數據進行處理和深度學習。