大數(shù)據(jù)的主要特點(diǎn)是數(shù)據(jù)量大、數(shù)據(jù)處理速度快、數(shù)據(jù)真實(shí)性高、數(shù)據(jù)類別復(fù)雜等。大數(shù)據(jù)簡(jiǎn)單說(shuō)就是現(xiàn)實(shí)世界數(shù)據(jù)化,大數(shù)據(jù)的數(shù)據(jù)集特別大,數(shù)據(jù)類別復(fù)雜,這種數(shù)據(jù)集不能用傳統(tǒng)的數(shù)據(jù)庫(kù)進(jìn)行轉(zhuǎn)存、管理和處理,需要具有更強(qiáng)大決策力的信息資產(chǎn),今天上午在貴州省大數(shù)據(jù)中心看到了大數(shù)據(jù)應(yīng)用的事例。
1、大數(shù)據(jù)是什么意思?
大數(shù)據(jù),在近幾年來(lái)越來(lái)越受到人們的關(guān)注,盡管大數(shù)據(jù)概念已經(jīng)在各行業(yè)中應(yīng)用逐漸變得廣泛起來(lái),但是對(duì)于大多數(shù)人來(lái)說(shuō),大數(shù)據(jù)概念在他們眼里還是模糊不清的。大數(shù)據(jù)(bigdata)是指無(wú)法在一定時(shí)間內(nèi)用常規(guī)軟件工具對(duì)其內(nèi)容進(jìn)行抓取、管理和處理的數(shù)據(jù)集合,大數(shù)據(jù)有五大特點(diǎn),即量大、高速、多樣、低價(jià)值密度、真實(shí)性。
它并沒(méi)有統(tǒng)計(jì)學(xué)的抽樣方法,只是觀察和追蹤發(fā)生的事情,大數(shù)據(jù)的用法傾向于預(yù)測(cè)分析、用戶行為分析或某些其他高級(jí)數(shù)據(jù)分析方法的使用。大數(shù)據(jù)的數(shù)據(jù)集特別大,數(shù)據(jù)類別復(fù)雜,這種數(shù)據(jù)集不能用傳統(tǒng)的數(shù)據(jù)庫(kù)進(jìn)行轉(zhuǎn)存、管理和處理,需要具有更強(qiáng)大決策力的信息資產(chǎn),大數(shù)據(jù)的主要特點(diǎn)是數(shù)據(jù)量大、數(shù)據(jù)處理速度快、數(shù)據(jù)真實(shí)性高、數(shù)據(jù)類別復(fù)雜等。
大數(shù)據(jù)是新資源、新技術(shù)和新理念的混合體,大數(shù)據(jù)技術(shù)的戰(zhàn)略意義不在于掌握龐大的數(shù)據(jù)信息,而在于對(duì)這些含有意義的數(shù)據(jù)進(jìn)行專業(yè)化處理。隨著電子信息技術(shù)的發(fā)展大數(shù)據(jù)將在BI,工業(yè)4.0、云計(jì)算,物聯(lián)網(wǎng),互聯(lián)網(wǎng),人工智能等領(lǐng)域發(fā)揮著巨大的作用,“大數(shù)據(jù)”能幫助企業(yè)找到一個(gè)個(gè)難題的答案,給企業(yè)帶來(lái)前所未有的商業(yè)價(jià)值與機(jī)會(huì)。
2、大數(shù)據(jù)是什么?
采集記錄足夠多的數(shù)據(jù),使工作更加針對(duì)化和精準(zhǔn)化,這是大數(shù)據(jù)嗎?這不是大數(shù)據(jù)而只是數(shù)據(jù)化,什么是大數(shù)據(jù)呢?例如洛杉磯警方曾對(duì)以往的刑事案件做了統(tǒng)計(jì),通過(guò)算法得出了第二天的高概率犯罪地點(diǎn),然后有針對(duì)性的派警察去該處巡邏,從而使得當(dāng)?shù)氐姆缸铿F(xiàn)象下降20%。這是大數(shù)據(jù),再比如,經(jīng)濟(jì)學(xué)家都認(rèn)為股票無(wú)法預(yù)測(cè),而一位劍橋大學(xué)畢業(yè)的博士搞了個(gè)公司,對(duì)有史以來(lái)幾乎所有的證券交易的數(shù)據(jù)進(jìn)行記錄,然后通過(guò)算法進(jìn)行分析。
他對(duì)什么國(guó)家政策、公司業(yè)績(jī)、行業(yè)走向等等一眼都不看,100%地排除主觀意志的,只根據(jù)計(jì)算結(jié)果來(lái)進(jìn)行投資,最后賺了大錢,這是大數(shù)據(jù)。大數(shù)據(jù)的精髓并不在于數(shù)據(jù)的精準(zhǔn)和數(shù)量,而在于對(duì)內(nèi)在規(guī)律的挖掘和對(duì)未來(lái)趨勢(shì)的預(yù)測(cè),其思路是:一個(gè)結(jié)果是有很多原因的,原因作用的強(qiáng)度可能是隨機(jī)的,我們對(duì)其中作用的機(jī)理并不清楚。
我們難以找出規(guī)律性,但知道規(guī)律性就蘊(yùn)含在結(jié)果數(shù)據(jù)之中,如果我們能建設(shè)合適的模型,寫出好的算法,就有可能把這個(gè)規(guī)律性提煉出來(lái),從而能科學(xué)地發(fā)現(xiàn)真相和預(yù)測(cè)未來(lái),今天上午在貴州省大數(shù)據(jù)中心看到了大數(shù)據(jù)應(yīng)用的事例。金潤(rùn)建設(shè)和鵬潤(rùn)達(dá)這兩家企業(yè)分別投標(biāo)200多次,一次也沒(méi)中過(guò),依然積極地投,投標(biāo)是要成本的,這兩家公司那里來(lái)的動(dòng)力?通過(guò)大數(shù)據(jù)的知識(shí)挖掘技術(shù),發(fā)現(xiàn)了它們總是陪著固定的一家公司一同招標(biāo),最后總是那家公司中標(biāo)。
3、大數(shù)據(jù)的含義和作用是什么?
大數(shù)據(jù)簡(jiǎn)單說(shuō)就是現(xiàn)實(shí)世界數(shù)據(jù)化!而大數(shù)據(jù)對(duì)于個(gè)人的意義就是:個(gè)人與信息的強(qiáng)結(jié)合,個(gè)人自帶可信的信息,就拿健康碼來(lái)說(shuō),為什么綠碼就能放行?為什么各個(gè)檢查口看到綠碼就放行?因?yàn)榫G碼是攜帶了個(gè)人安全的健康信息,表示這個(gè)人是低風(fēng)險(xiǎn)的。換句話說(shuō),健康碼是個(gè)人信息的一部分,而且是可信的,健康碼的存在,是基于大數(shù)據(jù)的。
我們?nèi)藭?huì)休息,但是手機(jī)不會(huì)休息,于是我們的位置信息隨時(shí)隨地被記錄下來(lái),形成一個(gè)個(gè)人的行動(dòng)路徑,我們有沒(méi)有經(jīng)過(guò)高風(fēng)險(xiǎn)地區(qū),甚至可以劃分到社區(qū)和小區(qū)。通過(guò)收集類似的個(gè)人大量數(shù)據(jù),最終形成了一個(gè)綠色的健康碼,以證明我們是安全的,我們沒(méi)有攜帶病毒,早期互聯(lián)網(wǎng),人和信息是分開的,電腦是固定在一個(gè)個(gè)地方,我們只能收集到ip,個(gè)人賬戶信息。