大數(shù)據(jù)已經(jīng)越來越吸引全社會(huì)的關(guān)注，大量的人才和財(cái)富進(jìn)入大數(shù)據(jù)領(lǐng)域，與此同時(shí)，真正了解大數(shù)據(jù)的卻并不多。中培偉業(yè)《大數(shù)據(jù)與可視化技術(shù)》培訓(xùn)專家蔣老師在這里就大數(shù)據(jù)領(lǐng)域的8個(gè)重要觀點(diǎn)進(jìn)行了論述。他認(rèn)為這個(gè)觀點(diǎn)對(duì)深刻理解大數(shù)據(jù)具有重要幫助作用。

觀點(diǎn)一 ：大數(shù)據(jù)的信息熵值低

信息熵這一概念是由香農(nóng)在1948年提出來的，可以用于表述信息的價(jià)值，信息熵高的言簡(jiǎn)意賅，信息熵低的冗余拖沓。目前，很多大數(shù)據(jù)的來源都是一些系統(tǒng)的Log，圖片，視頻等。特別是日志系統(tǒng)數(shù)據(jù)，數(shù)據(jù)越來越多，越來越大，其中大部分是固定模板的數(shù)據(jù)，區(qū)分度差，信息量并沒有隨著數(shù)據(jù)的增加而線性增加。

觀點(diǎn)二：大數(shù)據(jù)不是銀彈，而是螞蟻效應(yīng)

大數(shù)據(jù)應(yīng)用常見，多見于推薦系統(tǒng)，業(yè)務(wù)流程優(yōu)化，醫(yī)療，性能優(yōu)化，預(yù)測(cè)，金融交易等，這些業(yè)務(wù)在傳統(tǒng)的做法上，已經(jīng)十分依賴于數(shù)據(jù)了，雖然以前不叫大數(shù)據(jù)，但是也都是數(shù)據(jù)驅(qū)動(dòng)的業(yè)務(wù)。數(shù)據(jù)的規(guī)模和種類增多，處理方法的增多，會(huì)漸漸提高這些應(yīng)用的精準(zhǔn)性，這種提高一定是漸漸的，一點(diǎn)一滴的。也許一天兩天感覺不錯(cuò)來的，但是經(jīng)過多年的持續(xù)改進(jìn)，這種效果是顯而易見的。

觀點(diǎn)三：大數(shù)據(jù)不解釋因果關(guān)系，只關(guān)心相關(guān)性

有理論給大數(shù)據(jù)的一個(gè)特征進(jìn)行了定義，即它“不是因果關(guān)系，而是相關(guān)關(guān)系”。沃爾瑪通過數(shù)據(jù)挖掘，發(fā)現(xiàn)蛋撻和颶風(fēng)產(chǎn)品有很多關(guān)聯(lián)性，并且放在一起銷售提高銷售量。沒有人清楚其中的因果關(guān)系，當(dāng)然，也可能有人牽強(qiáng)的解釋，美國人喜歡颶風(fēng)時(shí)期躲在家里吃蛋撻，通過數(shù)據(jù)我們獲得了相關(guān)性，但是卻不理解其中因果關(guān)系。

觀點(diǎn)四： 大數(shù)據(jù)資源公司最佳變現(xiàn)是被收購，最直接變現(xiàn)渠道是廣告和泛征信

很多專業(yè)大數(shù)據(jù)服務(wù)公司的發(fā)展都不走上市之路(注意不包括大數(shù)據(jù)技術(shù)公司，因?yàn)樗麄儗?duì)于變現(xiàn)的能力和可持續(xù)性都有很多顧慮，他們也面臨高風(fēng)險(xiǎn)的用戶隱私挑戰(zhàn)，因此很多大數(shù)據(jù)資源公司的PR工作，遠(yuǎn)遠(yuǎn)多于具體落地的數(shù)據(jù)服務(wù)工作。因此，各個(gè)專業(yè)大數(shù)據(jù)公司都忙于各種行業(yè)洞察報(bào)告和排行榜，數(shù)據(jù)可視化的工作一個(gè)比一個(gè)炫麗，一個(gè)比一個(gè)追熱點(diǎn)。談到大數(shù)據(jù)公司的變現(xiàn)，很多公司會(huì)提到“數(shù)據(jù)服務(wù)”，實(shí)際上數(shù)據(jù)服務(wù)的市場(chǎng)相對(duì)穩(wěn)定，并沒有因?yàn)榇髷?shù)據(jù)公司的發(fā)展而市場(chǎng)膨脹，因此“數(shù)據(jù)服務(wù)”實(shí)際上是一個(gè)明顯的“僧多粥少”的狀態(tài)。

另外，大數(shù)據(jù)的價(jià)值呈現(xiàn)存在于征信系統(tǒng)，金融的本質(zhì)是一個(gè)套信用系統(tǒng)，這就是為什么各大互聯(lián)網(wǎng)公司都早早進(jìn)入金融業(yè)務(wù)。目前很多P2P公司是否能夠生存，主要依據(jù)就是風(fēng)險(xiǎn)控制，大數(shù)據(jù)是重要技術(shù)支持，因此很多P2P會(huì)采購大量數(shù)據(jù)資源，加強(qiáng)自己的征信系統(tǒng)。

觀點(diǎn)五：大數(shù)據(jù)是對(duì)用戶隱私的汲取

大數(shù)據(jù)正在結(jié)合智能設(shè)備的普及而大力推進(jìn)，例如攝像頭，手機(jī)，智能穿戴設(shè)別等。 其中，大量用戶隱私數(shù)據(jù)被收集，例如用戶地址，交易數(shù)據(jù)，搜索數(shù)據(jù)，用戶的地理位置信息，用戶的脈搏，聯(lián)系人列表等等。這些都是用戶的個(gè)人數(shù)據(jù)，各大數(shù)據(jù)公司都通過改善服務(wù)為借口，獲得用戶的授權(quán)，而進(jìn)行隱私的汲取和偷窺。

也有一種聲音，這些數(shù)據(jù)是為了讓你享受更好的服務(wù)。這里面也是很多邏輯問題。首先，服務(wù)商提供更好的服務(wù)，并不代表可以收集用戶的隱私數(shù)據(jù);其次，很多公司不提供不收集用戶隱私數(shù)據(jù)的服務(wù)的選項(xiàng)，這讓很多用戶無法選擇禁止用戶隱私數(shù)據(jù)收集，這是一種利用市場(chǎng)地位的壟斷和霸王條款而后，所有數(shù)據(jù)公司沒有提供數(shù)據(jù)清理功能，刪除用戶所有的歷史數(shù)據(jù)。這意味著，你的隱私數(shù)據(jù)一旦被收集，可以被無限次的無范圍的濫用。

觀點(diǎn)六： 用戶數(shù)據(jù)是無法通過定價(jià)而進(jìn)行交換的

大數(shù)據(jù)采集公司，都有數(shù)據(jù)變現(xiàn)需求。對(duì)于數(shù)據(jù)采集公司來說，雖然能做一些數(shù)據(jù)分析和預(yù)測(cè)，但這些分析服務(wù)的費(fèi)用較少(在成為頂級(jí)咨詢公司之前，很難持續(xù)公司的正常運(yùn)作，只能繼續(xù)燒錢或者被收購。對(duì)于數(shù)據(jù)采集公司來說，很多人認(rèn)為數(shù)據(jù)可以在公開公正公平的數(shù)據(jù)市場(chǎng)中變現(xiàn)，不少市面上的DMP都提供了一些數(shù)據(jù)交易平臺(tái)，希望數(shù)據(jù)項(xiàng)商品一些安全，公平的交易。

在各種大數(shù)據(jù)的應(yīng)用中，用戶的個(gè)人數(shù)據(jù)在很多場(chǎng)景中是最有價(jià)值的，這些數(shù)據(jù)一旦流入到市場(chǎng)或者黑市，社會(huì)后果將不堪設(shè)想，而且數(shù)據(jù)泄露者還面臨法律風(fēng)險(xiǎn)，因此數(shù)據(jù)交易無法在公開的數(shù)據(jù)交易市場(chǎng)進(jìn)行。一些脫敏技術(shù)可以讓數(shù)據(jù)難以反追查，但是脫敏技術(shù)的尺度把握卻是在人的手上，它很容易引入各種法律風(fēng)險(xiǎn)。

觀點(diǎn)七：大數(shù)據(jù)的價(jià)值是真水無香

在大數(shù)據(jù)這一名詞在社會(huì)上鋪天蓋地呈現(xiàn)的情況下，讓人覺得不懂大數(shù)據(jù)是一種羞恥。最近面試過好些候選人，做沒做過數(shù)據(jù)都說想做大數(shù)據(jù)，而且是非大數(shù)據(jù)/機(jī)器學(xué)習(xí)不做，問他為什么要做大數(shù)據(jù)，所有回答都是這是趨勢(shì)，不轉(zhuǎn)型，寧等死，大數(shù)據(jù)可以挖掘出很多價(jià)值，幫助業(yè)務(wù)增長，這種感覺很好。

反過頭來，看看工作中搞大數(shù)據(jù)技術(shù)的同學(xué)，每天通過腳本處理成千上萬的數(shù)據(jù)，每天苦逼的處理各個(gè)數(shù)據(jù)格式，數(shù)據(jù)清洗，數(shù)據(jù)加工，數(shù)據(jù)分類/聚類，好不容易生成一些數(shù)據(jù)洞察結(jié)果，也需要用一大堆腳本和數(shù)據(jù)進(jìn)行二次驗(yàn)證，包括精準(zhǔn)率召回率。

確實(shí)，在一種新的數(shù)據(jù)洞察或大數(shù)據(jù)應(yīng)用出來的時(shí)候，確實(shí)對(duì)于產(chǎn)品的提升很有幫助，為了保持保護(hù)這種提升，需要不斷的對(duì)于數(shù)據(jù)進(jìn)行清理，提高及時(shí)性，這種數(shù)據(jù)的維護(hù)工作慢慢會(huì)變成大數(shù)據(jù)工作者的很大一部分工作。

觀點(diǎn)八：搞清楚業(yè)務(wù)之后，再談大數(shù)據(jù)也不晚

大數(shù)據(jù)作為當(dāng)前的一個(gè)熱門詞匯，目前很多行業(yè)峰會(huì)都沾上“大數(shù)據(jù)”的光環(huán)了，以前的站長大會(huì)也變成”自媒體大數(shù)據(jù)峰會(huì)”了，以前的互聯(lián)網(wǎng)運(yùn)營大會(huì)也變成”大數(shù)據(jù)運(yùn)營峰會(huì)”了，以前的軟件研發(fā)大會(huì)也加入了一個(gè)“大數(shù)據(jù)”分會(huì)場(chǎng)了。這是一個(gè)大數(shù)據(jù)唾沫橫飛的世界，一不小心你就參與其中了。