大數(shù)據(jù)分析Big data analysis PPT download匯報(bào)人：JAKY匯報(bào)部門(mén)：WOTUWANG

隨著云時(shí)代的來(lái)臨，大數(shù)據(jù)（Big data）也吸引了越來(lái)越多的關(guān)注。分析師團(tuán)隊(duì)認(rèn)為，大數(shù)據(jù)（Big data）通常用來(lái)形容一個(gè)公司創(chuàng)造的大量非結(jié)構(gòu)化數(shù)據(jù)和半結(jié)構(gòu)化數(shù)據(jù)，這些數(shù)據(jù)在下載到關(guān)系型數(shù)據(jù)庫(kù)用于分析時(shí)會(huì)花費(fèi)過(guò)多時(shí)間和金錢(qián)。大數(shù)據(jù)分析常和云計(jì)算聯(lián)系到一起，因?yàn)閷?shí)時(shí)的大型數(shù)據(jù)集分析需要像MapReduce一樣的框架來(lái)向數(shù)十、數(shù)百或甚至數(shù)千的電腦分配工作。

目錄CONTENTS大數(shù)據(jù)是什么？大數(shù)據(jù)的特征和結(jié)構(gòu)1234大數(shù)據(jù)時(shí)代的機(jī)遇和挑戰(zhàn)大數(shù)據(jù)的趨勢(shì)

01What is the big data?

指無(wú)法在一定時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合，是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。大數(shù)據(jù)

海量高增長(zhǎng)率多樣化決策力洞察力優(yōu)化力 對(duì)于“大數(shù)據(jù)”（Big data）研究機(jī)構(gòu)Gartner給出了這樣的定義?！按髷?shù)據(jù)”是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力來(lái)適應(yīng)海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。

大數(shù)據(jù)是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。大數(shù)據(jù)就是“未來(lái)的新石油”。

1Byte= 8 Bit1 KB= 1,024 Bytes = 8192 bit1 MB= 1,024 KB = 1,048,576 Bytes1 GB= 1,024 MB = 1,048,576 KB1 TB= 1,024 GB = 1,048,576 MB1 PB= 1,024 TB = 1,048,576 GB1 EB = 1,024 PB = 1,048,576 TB1 ZB= 1,024 EB = 1,048,576 PB1 YB= 1,024 ZB = 1,048,576 EB1 BB= 1,024 YB = 1,048,576 ZB1 NB= 1,024 BB = 1,048,576 YB1 DB= 1,024 NB = 1,048,576 BB何謂大？

1PB相當(dāng)于50%的全美學(xué)術(shù)研究圖書(shū)館藏書(shū)信息內(nèi)容5EB相當(dāng)于至今全世界人類所講過(guò)的話語(yǔ)1ZB如同全世界海灘上的沙子數(shù)量總和1YB相當(dāng)于7000位人類體內(nèi)的微細(xì)胞總和

不是隨機(jī)樣本而是全部數(shù)據(jù)不是因果關(guān)系而是相關(guān)關(guān)系不是精確性而是混雜性更多更好更雜

02The characteristics and structure of big data

結(jié)構(gòu)化半結(jié)構(gòu)化大數(shù)據(jù)包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)，非結(jié)構(gòu)化數(shù)據(jù)越來(lái)越成為數(shù)據(jù)的主要部分。據(jù)IDC的調(diào)查報(bào)告顯示：企業(yè)中80%的數(shù)據(jù)都是非結(jié)構(gòu)化數(shù)據(jù)，這些數(shù)據(jù)每年都按指數(shù)增長(zhǎng)60%。大數(shù)據(jù)就是互聯(lián)網(wǎng)發(fā)展到現(xiàn)今階段的一種表象或特征而已，沒(méi)有必要神話它或?qū)λ３志次分?，在以云?jì)算為代表的技術(shù)創(chuàng)新大幕的襯托下，這些原本看起來(lái)很難收集和使用的數(shù)據(jù)開(kāi)始容易被利用起來(lái)了，通過(guò)各行各業(yè)的不斷創(chuàng)新，大數(shù)據(jù)會(huì)逐步為人類創(chuàng)造更多的價(jià)值。

02Opportunities and challenges in the era of big data

這里可以輸入一下簡(jiǎn)單的概括性的內(nèi)容文字，用戶可以在投影機(jī)這里可以輸入一下簡(jiǎn)單的概括性的內(nèi)容文字，用戶可以在投影機(jī)這里可以輸入一下簡(jiǎn)單的概括性的內(nèi)容文字，用戶可以在投影機(jī)這里可以輸入一下簡(jiǎn)單的概括性的內(nèi)容文字，用戶可以在投影機(jī)這里可以輸入一下簡(jiǎn)單的概括性的內(nèi)容文字，用戶可以在投影機(jī)這里可以輸入一下簡(jiǎn)單的概括性的內(nèi)容文字，用戶可以在投影機(jī)

機(jī)遇挑戰(zhàn)大數(shù)據(jù)技術(shù)促進(jìn)國(guó)家和社會(huì)發(fā)展大數(shù)據(jù)藍(lán)海成為企業(yè)競(jìng)爭(zhēng)的新焦點(diǎn)大數(shù)據(jù)時(shí)代呼喚創(chuàng)新型人才大數(shù)據(jù)技術(shù)的運(yùn)用仍有困難大數(shù)據(jù)給信息安全帶來(lái)新挑戰(zhàn)

大數(shù)據(jù)所能帶來(lái)的巨大商業(yè)價(jià)值，被認(rèn)為將引領(lǐng)一場(chǎng)足以與20世紀(jì)計(jì)算機(jī)革命匹敵的巨大變革。大數(shù)據(jù)正在對(duì)每個(gè)領(lǐng)域都造成影響，包括商業(yè)、經(jīng)濟(jì)等領(lǐng)域。大數(shù)據(jù)正在促生新的藍(lán)海，催生新的經(jīng)濟(jì)增長(zhǎng)點(diǎn)，正在成為企業(yè)競(jìng)爭(zhēng)的新焦點(diǎn)。大數(shù)據(jù)所能帶來(lái)的巨大商業(yè)價(jià)值，被認(rèn)為將引領(lǐng)一場(chǎng)足以與20世紀(jì)計(jì)算機(jī)革命匹敵的巨大變革。

大數(shù)據(jù)技術(shù)的運(yùn)用前景是十分光明的。當(dāng)前，我國(guó)正處在全面建成小康社會(huì)征程中，工業(yè)化、信息化、城鎮(zhèn)化、農(nóng)業(yè)現(xiàn)代化任務(wù)很重，建設(shè)下一代信息基礎(chǔ)設(shè)施，發(fā)展現(xiàn)代信息技術(shù)產(chǎn)業(yè)體系，健全信息安全保障體系，推進(jìn)信息網(wǎng)絡(luò)技術(shù)廣泛運(yùn)用，是實(shí)現(xiàn)四化同步發(fā)展的保證。大數(shù)據(jù)分析對(duì)我們深刻領(lǐng)會(huì)世情和國(guó)情，把握規(guī)律，實(shí)現(xiàn)科學(xué)發(fā)展，做出科學(xué)決策具有重要意義，我們必須重新認(rèn)識(shí)數(shù)據(jù)的重要價(jià)值。實(shí)現(xiàn)科學(xué)發(fā)展 做出科學(xué)決策

數(shù)據(jù)收集要對(duì)來(lái)自網(wǎng)絡(luò)包括物聯(lián)網(wǎng)和機(jī)構(gòu)信息系統(tǒng)的數(shù)據(jù)附上時(shí)空標(biāo)志，去偽存真，盡可能收集異源甚至是異構(gòu)的數(shù)據(jù)，還可與歷史數(shù)據(jù)對(duì)照數(shù)據(jù)處理大數(shù)據(jù)的復(fù)雜性使得難以用傳統(tǒng)的方法描述與度量，需要將高維圖像等多媒體數(shù)據(jù)降維后度量與處理，利用上下文關(guān)聯(lián)進(jìn)行語(yǔ)義分析數(shù)據(jù)存儲(chǔ)要達(dá)到低成本、低能耗、高可靠性目標(biāo)，要用到冗余配置、分布化和云計(jì)算技術(shù)，存儲(chǔ)時(shí)對(duì)數(shù)據(jù)進(jìn)行分類，通過(guò)過(guò)濾和去重，減少存儲(chǔ)量.結(jié)果的可視化呈現(xiàn)要達(dá)到低成本、低能耗、高可靠性目標(biāo)，要用到冗余配置、分布化和云計(jì)算技術(shù)，存儲(chǔ)時(shí)對(duì)數(shù)據(jù)進(jìn)行分類，通過(guò)過(guò)濾和去重，減少存儲(chǔ)量，并加入便于檢索的標(biāo)簽。數(shù)據(jù)收集要對(duì)來(lái)自網(wǎng)絡(luò)包括物聯(lián)網(wǎng)和機(jī)構(gòu)信息系統(tǒng)的數(shù)據(jù)附上時(shí)空標(biāo)志，去偽存真，盡可能收集異源甚至是異構(gòu)的數(shù)據(jù)，還可與歷史數(shù)據(jù)對(duì)照數(shù)據(jù)收集要對(duì)來(lái)自網(wǎng)絡(luò)包括物聯(lián)網(wǎng)和機(jī)構(gòu)信息系統(tǒng)的數(shù)據(jù)附上時(shí)空標(biāo)志，去偽存真，盡可能收集異源甚至是異構(gòu)的數(shù)據(jù)，還可與歷史數(shù)據(jù)對(duì)照

加大隱私泄露風(fēng)險(xiǎn)大量數(shù)據(jù)的集中存儲(chǔ)增加了其泄露的風(fēng)險(xiǎn)；一些敏感數(shù)據(jù)的所有權(quán)和使用權(quán)并沒(méi)有清晰界定。復(fù)雜的數(shù)據(jù)存儲(chǔ)在一起，可能造成企業(yè)安全管理不合規(guī)；安全防護(hù)手段更新升級(jí)慢，存在漏洞。黑客可收集更多有用信息，大數(shù)據(jù)分析讓攻擊更精準(zhǔn)；大數(shù)據(jù)為黑客發(fā)起攻擊提供了更多的機(jī)會(huì)存儲(chǔ)和安防挑戰(zhàn)運(yùn)用攻擊手段加大隱私泄露風(fēng)險(xiǎn)大量數(shù)據(jù)的集中存儲(chǔ)增加了其泄露的風(fēng)險(xiǎn)；一些敏感數(shù)據(jù)的所有權(quán)和使用權(quán)并沒(méi)有清晰界定。

“棱鏡門(mén)”引爆大數(shù)據(jù)時(shí)代爭(zhēng)議事情的起因是美國(guó)中情局前職員斯諾登向媒體爆料，過(guò)去6年間，美國(guó)的情報(bào)部門(mén)通過(guò)一個(gè)代號(hào)為“棱鏡”的項(xiàng)目，從多家知名互聯(lián)網(wǎng)公司獲取電子郵件、在線聊天內(nèi)容、照片、文檔、視頻等網(wǎng)絡(luò)私人數(shù)據(jù)，跟蹤用戶一舉一動(dòng)。他說(shuō)，自己只需要坐在辦公桌前，動(dòng)動(dòng)指頭，敲敲鍵盤(pán)，就能了解很多人的私密信息。斯諾登的爆料引起一片嘩然，根據(jù)他提供的資料，被卷入“棱鏡門(mén)”事件的公司包括微軟、雅虎、谷歌、蘋(píng)果、Facebook等9大IT業(yè)巨頭。在“棱鏡門(mén)”事件開(kāi)始發(fā)酵之后，這些公司先是趕緊出面否認(rèn)與美國(guó)政府的監(jiān)視項(xiàng)目進(jìn)行過(guò)合作，并相繼發(fā)表聲明，呼吁政府采取更透明態(tài)度，以證明他們的“清白”。

請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。

輸入文字請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔。請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔。請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。請(qǐng)?jiān)诖颂幪砑釉敿?xì)描述文本，盡量與標(biāo)題文本語(yǔ)言風(fēng)格相符合，語(yǔ)言描述盡量簡(jiǎn)潔。

60%25%90%10%產(chǎn)品特征此處添加詳細(xì)文本描述，建議與標(biāo)題相關(guān)并符合整體語(yǔ)言風(fēng)格，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。產(chǎn)品特征此處添加詳細(xì)文本描述，建議與標(biāo)題相關(guān)并符合整體語(yǔ)言風(fēng)格，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。產(chǎn)品特征此處添加詳細(xì)文本描述，建議與標(biāo)題相關(guān)并符合整體語(yǔ)言風(fēng)格，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。產(chǎn)品特征此處添加詳細(xì)文本描述，建議與標(biāo)題相關(guān)并符合整體語(yǔ)言風(fēng)格，語(yǔ)言描述盡量簡(jiǎn)潔生動(dòng)。

Thank you forlistening