對于大數(shù)據(jù)來說,今年仍然是熱門的一年。由于大數(shù)據(jù)行業(yè)的薪水和發(fā)展前景,我們可以看到越來越多的人希望加入大數(shù)據(jù)行業(yè)。盡管每個人都對大數(shù)據(jù)工作非常樂觀,但是學(xué)完大數(shù)據(jù)可以做什么工作呢?相信大多數(shù)初學(xué)者都不清楚,為了解決每個人對大數(shù)據(jù)工作的疑問,讓我們談?wù)勁c大數(shù)據(jù)相關(guān)的職位和特定的工作內(nèi)容。
大數(shù)據(jù)開發(fā)工程師:
主要工作負(fù)責(zé)大數(shù)據(jù)技術(shù)開發(fā),例如,編寫離線處理程序、數(shù)據(jù)差集、數(shù)據(jù)ETL等。
大數(shù)據(jù)運維工程師:
主要工作負(fù)責(zé)維護(hù)公司大數(shù)據(jù)平臺,例如,管理、監(jiān)控Hadoop集群、監(jiān)控作業(yè)運行狀態(tài)等。
大數(shù)據(jù)架構(gòu)師:
主要工作負(fù)責(zé)公司的大數(shù)據(jù)平臺假設(shè),例如,技術(shù)選型、技術(shù)架設(shè)等。
大數(shù)據(jù)分析師:
主要工作負(fù)責(zé)結(jié)合行業(yè)經(jīng)驗,對公司不同業(yè)務(wù)單元的數(shù)據(jù)分析,如財務(wù)分析、生產(chǎn)分析、銷售分析。
大數(shù)據(jù)算法工程師:
主要工作負(fù)責(zé)機(jī)器學(xué)習(xí)相關(guān)算法開發(fā),例如,推薦系統(tǒng)算法開發(fā)。
大數(shù)據(jù)實時計算開發(fā)工程師:
主要工作負(fù)責(zé)公司實時計算系統(tǒng)開發(fā),例如,F(xiàn)link開發(fā)實時風(fēng)控系統(tǒng)、基于SparkStreaming開發(fā)實時指標(biāo)分析。
數(shù)據(jù)挖掘工程師:
主要工作負(fù)責(zé)基于大數(shù)據(jù)平臺上的數(shù)據(jù)探索、特征提取、挖掘模型選擇、評估等。例如,用戶畫像挖掘型標(biāo)簽開發(fā)。
BI開發(fā)工程師:
主要工作負(fù)責(zé)公司的商業(yè)智能平臺搭建,包括各類數(shù)據(jù)可視化報表制作、Dashboard大屏制作ETL開發(fā)工程師。負(fù)責(zé)對數(shù)據(jù)進(jìn)行數(shù)據(jù)探索、數(shù)據(jù)清洗、以及相關(guān)預(yù)處理。例如,將文本數(shù)據(jù)中一些不合法的數(shù)據(jù)清洗掉。
Hadoop開發(fā)工程師:
主要工作負(fù)責(zé)HDFS、以及MapReduce、Hive開發(fā)。例如,使用Hive搭建數(shù)據(jù)倉庫、編寫MapReduce程序?qū)?shù)據(jù)進(jìn)行預(yù)處理。
Spark開發(fā)工程師:
主要工作負(fù)貴開發(fā)Spark應(yīng)用程序進(jìn)行大規(guī)模數(shù)據(jù)處理。例如,編寫Spark程序來對網(wǎng)站流量數(shù)據(jù)進(jìn)行處理,形成點擊流數(shù)據(jù)。
關(guān)于學(xué)完大數(shù)據(jù)可以做什么工作的內(nèi)容就介紹到這里了。相信每個人都對大數(shù)據(jù)的使用方向已經(jīng)有了大致的了解。如果想了解更多關(guān)于大數(shù)據(jù)的信息,請繼續(xù)關(guān)注中培偉業(yè)吧。