hdfs編程實踐的步驟 Java轉大數據的學習線路是什么?
Java轉大數據的學習線路是什么?專業軟件開發,在學校為主Java,現在Java開發工作1年多.想轉大數據1.先把linux環境搞熟,大數據很多技術是布署在linux服務器的,能熟練在用vi編輯文本2
Java轉大數據的學習線路是什么?
專業軟件開發,在學校為主Java,現在Java開發工作1年多.想轉大數據
1.先把linux環境搞熟,大數據很多技術是布署在linux服務器的,能熟練在用vi編輯文本
2.動手布署hadoop,把hdfs,MapReduce騎得
3.重新部署zookeeper
4.作戰部署hbase,了解列式存儲的表設計方法
5.掌握hive的使用
6.sparkstreaming,storm流式可以計算
7.學習學習sparkmllib,python為數據分析做準備
有Java基礎半路轉行大數據,必須怎么學習:
1、大數據基礎:Linux、Maven:Linux功能管理、Shell編程設計、Maven布署/配置/倉庫、MavenPOM
2、HDFS分布式文件系統
3、MapReduce分布式計算模型Yarn分布式資源管理器Zookeeper分布式協調服務
4、Hbase分布式數據庫Hive分布式數據倉庫
5、FlumeNG分布式數據采集系統Sqoop大數據遷移系統
6、Scala大數據黃金語言kafka分布式總線系統
7、SparkCore大數據計算基石SparkSQL數據挖掘利器SparkStreaming流式計算平臺
8、SparkMllib機器學習平臺SparkGraphx圖計算平臺
9、項目實戰
相關:
大數據開發工程師,所學習的知識是什么的
大數據自學誤區有哪些?大數據開發和數據分析怎么避免學誤區?
、大數據基礎:Linux、Maven:Linux功能管理、Shell編程設計、Maven作戰部署/配置/倉庫、MavenPOM