大數據開發、大數據分析、大數據運維主要工作各是什麼?哪個好?

donglei1097


在大數據領域大概有四個大的工作方向,除了大數據平臺應用及開發、大數據分析與應用和大數據平臺集成與運維之外,還有大數據平臺架構與研發,除了以上四個大的工作方向之外,還有一個工作方向是大數據技術推廣和培訓,這部分工作目前也有不少人在從事。

大數據平臺架構與研發主要的工作內容是研發底層的大數據平臺,這部分工作的難度較高,從事這部分工作的研發級崗位也並不多。現在不少技術研發團隊都以Hadoop、Spark平臺為基礎進行研發,這樣能夠節省大量的時間,也更容易做出市場接受度比較高的大數據平臺(商用較多)。

大數據平臺應用開發是目前一個就業的熱門方向,一方面是大數據開發的場景眾多,另一方面是難度並不高,能夠接納的從業人數也非常多。大數據開發主要是滿足企業在大數據平臺上的應用開發,與場景有密切的關係。大數據開發是在大數據平臺基礎之上的開發,充分利用大數據平臺提供的功能來滿足企業的實際需求。

大數據分析是大數據應用的一個重點,甚至可以說是大數據的核心內容。大數據分析是基於大數據平臺提供的功能進行具體的數據分析,數據分析與場景有密切的關係,比如出行大數據分析、營銷大數據分析、金融大數據分析等等。目前採用機器學習的方式進行大數據分析是一個趨勢,機器學習的步驟包括數據收集、算法設計、訓練算法、驗證算法和使用算法,所以算法在數據分析中起到了重要的作用,做數據分析工作要有一定的算法基礎。

大數據運維主要從事大數據平臺的軟硬件集成和運維工作,主要的工作內容是完成大數據平臺的部署和調試等相關工作,這部分工作崗位也比較多,企業往往需要有一個專門的運維團隊來保障大數據平臺的平穩運行。相對來說,這部分工作的難度小一些,但是需要掌握的內容也比較多,包括網絡、服務器等軟硬件知識。

大數據是我的主要研究方向之一,目前我也在帶大數據方向的研究生,我會陸續在頭條寫一些關於大數據方面的文章,感興趣的朋友可以關注我的頭條號,相信一定會有所收穫。

如果有大數據方面的問題,也可以諮詢我,謝謝!


IT人劉俊明


大數據開發

主要是負責大數據挖掘,大數據清洗處理,大數據建模等工作,主要是負責大規模數據的處理和應用,工作主要以開發為主,與大數據可視化分析工程師相互配合,從數據中挖掘出價值,為企業業務發展提供支持。

大數據分析

進行行業數據蒐集、整理、分析,並依據數據做出行業研究、評估和預測;

主要工作有四類:

1、從0到1搭建數據分析體系;

2、數據分析工具化,產品化;

3、支撐領導、部門決策的專題分析及業務方向探索;

4、數據規範制定及提升數據質量等基礎工作。

大數據運維

運營維護,Linux操作系統、應用系統的維護、監控、調優、故障排除,關注開源社區動態,追蹤前沿技術和應用等;

一般來講國內的互聯網運維負責軟件測試交付後的發佈和管理,將交付的業務軟件和硬件基礎設施高效合理的整合,轉換為可持續提供高質量服務的產品,同時最大限度降低服務運行的成本,保障服務運行的安全。

相關:

大數據分析師到底在幹嘛?

https://www.toutiao.com/i6549321396005110275/

加米穀:大數據分析,到底要分析些什麼?

https://www.toutiao.com/i6577599840014828045/

大數據學習:數據分析師的完整工作流程與知識結構體系

https://www.toutiao.com/i6584961126356746760/


Spark大數據開發


主要的工作是為了給人民、社會、大自然、地球服務。好與壞因對象而有不一,就好比當下年輕人玩的一款“王者榮耀”,玩家都說好,而沒碰過的就覺得這是一款爛遊戲,因為身邊的人都把大部分時間花在它身上了!


分享到:


相關文章: