時(shí)間：2015-12-07 11:28:05 點(diǎn)擊：次
來(lái)源：湛廬文化廬客匯 作者：吳明輝

條評(píng)論打印收藏

而我們真正記錄下來(lái)數(shù)據(jù)，記錄得越全面,，對(duì)還原真實(shí)世界就還原得越好,。但是很多情況下，如果真正的技術(shù),、好的算法或者數(shù)據(jù)清晰的整合能力很強(qiáng)的話,，可以把一個(gè)低分辨率的信息，還原成原來(lái)很高分別率,，很真實(shí)的情況,。就像我們的人眼其實(shí)就很厲害，因?yàn)槠鋵?shí)我是有一點(diǎn)近視眼的,，但是我看很遠(yuǎn)處的一個(gè)廣告牌,，上面的文字有的時(shí)候我看得不是很清楚，但是我的大腦是能夠猜出來(lái)到底這個(gè)文字是講什么的,，本質(zhì)上是因?yàn)樵谖业拇竽X里面是擁有識(shí)別低分辨率的數(shù)據(jù),，同時(shí)再把它還原推測(cè)到高分辨率的那個(gè)能力。這種能力其實(shí)也是大數(shù)據(jù)公司里面非常核心的能力,。

“并不是所有的數(shù)據(jù)在系統(tǒng)里面都存在,，比如說(shuō)我跟我同事之間的關(guān)系，我跟我愛(ài)人之間的家庭關(guān)系,，可能在公安系統(tǒng)里面并沒(méi)有完整的存儲(chǔ)數(shù)據(jù),。但是很多數(shù)據(jù)可以非常快速的被發(fā)現(xiàn)出來(lái),。”

3,、數(shù)據(jù)關(guān)聯(lián)：同一趟火車(chē)到互為同事的推斷

前面我給大家介紹的是數(shù)據(jù)的清洗整合,。實(shí)際上大數(shù)據(jù)技術(shù)除了信息整合之外，另外一個(gè)很核心的技術(shù)是數(shù)據(jù)的關(guān)聯(lián),。

前面我也提到了很多大數(shù)據(jù)客戶不管是政府還是企業(yè)都有很多不同的數(shù)據(jù),，因?yàn)閿?shù)據(jù)本身是需要關(guān)聯(lián)起來(lái)，在數(shù)據(jù)真正聯(lián)系到一起之后,，在數(shù)據(jù)內(nèi)部我們可以發(fā)現(xiàn)很多數(shù)據(jù)和數(shù)據(jù)之間的關(guān)系,，而這些關(guān)系真正的挖掘好了之后，它的實(shí)戰(zhàn)價(jià)值是非常大的,，可以起到1+1遠(yuǎn)遠(yuǎn)大于2的作用,。

在美國(guó)有一家非常有名的大數(shù)據(jù)企業(yè)叫“Palantir”，這家公司現(xiàn)在雖然還沒(méi)上市,，但市值已達(dá)兩百億美金,，是全球沒(méi)有上市的企業(yè)里市值排名前五的企業(yè)。這家企業(yè)之所以厲害是因?yàn)槠湓诶脭?shù)據(jù)關(guān)聯(lián)這種能力去給美國(guó)情報(bào)機(jī)構(gòu),，包括CIA,、美國(guó)國(guó)土安全局提供數(shù)據(jù)挖掘服務(wù)，幫助他們進(jìn)行反恐和非常重大的刑事案件追查,，數(shù)據(jù)的關(guān)聯(lián)在很多情況下能夠幫助政府很好的發(fā)現(xiàn)犯罪份子,。

明略數(shù)據(jù)現(xiàn)在也在利用類(lèi)似的技術(shù)給中國(guó)的公安局等部門(mén)提供類(lèi)似的服務(wù)。在整個(gè)公安破案過(guò)程中,，這種關(guān)系的挖掘是非常重要的,。就像前面我說(shuō)的，并不是所有數(shù)據(jù)在系統(tǒng)里面都存在,，比如說(shuō)我跟我同事之間的關(guān)系,，我跟我愛(ài)人之間的家庭關(guān)系，可能在公安系統(tǒng)里面并沒(méi)有完整的存儲(chǔ)數(shù)據(jù),。但是很多數(shù)據(jù)可以非?？焖俚谋话l(fā)現(xiàn)出來(lái)。舉個(gè)例子,，當(dāng)時(shí)我們?cè)诤颖弊隽艘粋€(gè)試點(diǎn),，我也是很強(qiáng)烈地被震撼到了,。當(dāng)時(shí)把我的名字輸?shù)竭@套系統(tǒng)之后,，其實(shí)是通過(guò)我們自己做開(kāi)發(fā)的系統(tǒng)，我們可以用非?？焖俚姆椒ú槌瞿囊恍┤耸俏以诿髀缘耐?。

雖然在公安系統(tǒng)里并沒(méi)有記錄我是明略的，我的同事也是明略的,，我們之間這種同事關(guān)系,，但在公安系統(tǒng)里記錄了我曾經(jīng)從北京坐了一趟動(dòng)車(chē)去到了河北,，我的另外一個(gè)同事也坐這趟車(chē)過(guò)去，同天晚上我們又入住了同一家酒店,，就這樣簡(jiǎn)簡(jiǎn)單單的信息,，就把我們兩個(gè)人關(guān)聯(lián)上了。我們其他同事用類(lèi)似的方法都可以非常簡(jiǎn)單地被關(guān)聯(lián)在一起,。當(dāng)我們利用這樣方法把幾組數(shù)據(jù),，比如乘坐火車(chē)的數(shù)據(jù)和住酒店的數(shù)據(jù)關(guān)聯(lián)到一起之后，很多關(guān)聯(lián)關(guān)系就自動(dòng)的被發(fā)現(xiàn)出來(lái)了,。這個(gè)價(jià)值對(duì)于整個(gè)安全體系來(lái)講是非常非常重要的,。今天其實(shí)很多公安都在試用類(lèi)似的方法偵破重大案件。

 4/5   首頁(yè) 上一頁(yè) 2 3 4 5 下一頁(yè) 尾頁(yè)