中文在线免费看视频_国产成人精品亚洲日本在线观看_亚洲精品第一综合99久久_国产亚洲精品日韩综合网

想往大數據方向發展，改怎準備？需要具備那些技能？

想往大數據方法發展,首先得確認你在轉之前是一個純小白,還是一個已經具備一定開發經驗的程序員.如果是有一定經驗的,相對來說會比較容易些,因為語言都是相通的.對于純小白,首先要做好充足的思想準備,學習編程本就是一件枯燥的事情,很磨練心智的.其次如果自學會比較難,比較慢,最好找個地方進行快速的學習(個人建議).不過對于大數據開發未來的前景還是不錯的,包括就業前景,就業薪資,所以如果你想以后將大數據作為長期從事的工作,還是可以的.

下面我介紹一些大數據相關的,希望對你有用:

一 大數據相關工作介紹

大數據方向的工作目前主要分為三個主要方向:

1. 大數據工程師

2. 數據分析師

3. 數據倉庫(數倉)

4. 其他（數據挖掘等）

二 必須掌握的技能20條 (按照這個順序進行學習)

1. Java基礎

2. Linux 基本操作

3. Hadoop(HDFS+MapReduce+Yarn)

4. Hive(Hql基本操作和原理理解)

5. Hbase(JavaAPI操作+Phoenix)

6. Flume/Sqoop(數據采集/傳輸工具)

7. Kafka(分布式總線系統)

8. Storm(分布式的實時計算框架)

9. Scala(編程語言,用于Spark開發)

10. Redis(非關系型數據庫)

11. SparkCore(主要數據清洗,分析)

12. SparkSQL(相關數據分析)

13. SparkStreaming(實時統計分析)

14. Spark內核編碼

15. Flink(開源流式框架,進行實時統計分析)

16. ElasticSearch(搜索引擎,進行數據存儲分析)

17. Logstash(動態地采集,轉換和傳輸數據)

18. Kibana(可視化監控管理及分析)

19. Mongodb(非關系型數據庫)

20. 輔助小工具(Oozie/Hue/azkaban等)

三 高級技能9條

1. 機器學習算法以及mahout庫加MLlib

3. Lambda 架構

4. Kappa 架構

5. Kylin(數據預處理工具)

6. Alluxio(數據存儲)

7. Python(輔助數據分析)

8. 可視化工具(superset/vue/grah)

9. Kudu(分布式數據存儲)