大數(shù)據(jù)（Big Data），指無(wú)法在一定時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合，是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。大數(shù)據(jù)有三個(gè)特點(diǎn)：大批量(Volume)、高速度(Velocity)和多樣化(Variety)。

  1.大批量–大數(shù)據(jù)體積龐大。企業(yè)里到處充斥著數(shù)據(jù)，信息動(dòng)不動(dòng)就達(dá)到了TB級(jí)，甚至是PB級(jí)

  2.高速度–大數(shù)據(jù)通常對(duì)時(shí)間敏感。為了限度地發(fā)揮其業(yè)務(wù)價(jià)值，大數(shù)據(jù)必須及時(shí)使用起來(lái)

  3.多樣化–大數(shù)據(jù)超越了結(jié)構(gòu)化數(shù)據(jù)，它括所有種類(lèi)的非結(jié)構(gòu)化數(shù)據(jù)，如文本、音頻、視頻、點(diǎn)擊流、日志文件等等都可以是大數(shù)據(jù)的組成部分

  一、ETL研發(fā)
  企業(yè)數(shù)據(jù)種類(lèi)與來(lái)源的不斷增加，對(duì)數(shù)據(jù)進(jìn)行整合與處理變得越來(lái)越困難，企業(yè)迫切需要一種有數(shù)據(jù)整合能力的人才。ETL開(kāi)發(fā)者這是在此需求基礎(chǔ)下而誕生的一個(gè)職業(yè)崗位。ETL人才在大數(shù)據(jù)時(shí)代炙手可熱的原因之一是：在企業(yè)大數(shù)據(jù)應(yīng)用的早期階段，Hadoop只是窮人的ETL。

  二、Hadoop開(kāi)發(fā)
  隨著數(shù)據(jù)規(guī)模不斷增大，傳統(tǒng)BI的數(shù)據(jù)處理成本過(guò)高企業(yè)負(fù)擔(dān)加重。而Hadoop廉價(jià)的數(shù)據(jù)處理能力被重新挖掘，企業(yè)需求持續(xù)增長(zhǎng)。并成為大數(shù)據(jù)人才必須掌握的一種技術(shù)。

  三、可視化工具開(kāi)發(fā)
  可視化開(kāi)發(fā)就是在可視化工具提供的圖形用戶界面上，通過(guò)操作界面元素，有可視化開(kāi)發(fā)工具自動(dòng)生成相關(guān)應(yīng)用軟件，輕松跨越多個(gè)資源和層次連接所有數(shù)據(jù)。過(guò)去，數(shù)據(jù)可視化屬于商業(yè)智能開(kāi)發(fā)者類(lèi)別，但是隨著Hadoop的崛起，數(shù)據(jù)可視化已經(jīng)成了一項(xiàng)獨(dú)立的專(zhuān)業(yè)技能和崗位。

  四、信息架構(gòu)開(kāi)發(fā)
  大數(shù)據(jù)重新激發(fā)了主數(shù)據(jù)管理的熱潮。充分開(kāi)發(fā)利用企業(yè)數(shù)據(jù)并支持決策需要非常專(zhuān)業(yè)的技能。信息架構(gòu)師必須了解如何定義和存檔關(guān)鍵元素，確保以最有效的方式進(jìn)行數(shù)據(jù)管理和利用。信息架構(gòu)師的關(guān)鍵技能括主數(shù)據(jù)管理、業(yè)務(wù)知識(shí)和數(shù)據(jù)建模等。

  五、數(shù)據(jù)倉(cāng)庫(kù)研究
  為方便企業(yè)決策，出于分析性報(bào)告和決策支持的目的而創(chuàng)建的數(shù)據(jù)倉(cāng)庫(kù)研究崗位是一種所有類(lèi)型數(shù)據(jù)的戰(zhàn)略集合。為企業(yè)提供業(yè)務(wù)智能服務(wù)，指導(dǎo)業(yè)務(wù)流程改進(jìn)和監(jiān)視時(shí)間、成本、質(zhì)量和控制。

  六、OLAP開(kāi)發(fā)
  OLAP在線聯(lián)機(jī)分析開(kāi)發(fā)者，負(fù)責(zé)將數(shù)據(jù)從關(guān)系型或非關(guān)系型數(shù)據(jù)源中抽取出來(lái)建立模型，然后創(chuàng)建數(shù)據(jù)訪問(wèn)的用戶界面，提供高性能的預(yù)定義查詢功能。