“大數(shù)據(jù)”面臨大挑戰(zhàn)

計(jì)算機(jī)大會(huì)專(zhuān)門(mén)組織的“大數(shù)據(jù)主題論壇”可謂高規(guī)格陣容，主講者有中國(guó)工程院院士、中科院計(jì)算機(jī)所研究員李國(guó)杰，中國(guó)工程院院士東北大學(xué)教授柴天佑，中國(guó)科學(xué)院院士、北京大學(xué)教授鄂維南；中國(guó)科學(xué)院院士、上海交通大學(xué)副校長(zhǎng)梅宏等。

“IT技術(shù)廣泛的應(yīng)用使我們獲得了巨大數(shù)據(jù)，從這些數(shù)據(jù)當(dāng)中我們可以得到很多東西，也使計(jì)算機(jī)系統(tǒng)、軟件技術(shù)、生產(chǎn)生活，包括數(shù)學(xué)基礎(chǔ)研究面臨新的挑戰(zhàn)和機(jī)遇?！闭搲鞒秩?、國(guó)防科技大學(xué)王懷民教授說(shuō)。

梅宏院士認(rèn)為信息界當(dāng)前的幾個(gè)最熱點(diǎn)的問(wèn)題，大數(shù)據(jù)、云計(jì)算、移動(dòng)互聯(lián)網(wǎng)本質(zhì)上都是互聯(lián)網(wǎng)計(jì)算及其延伸產(chǎn)生的效果，包括更快的網(wǎng)絡(luò)帶寬，更廣大的網(wǎng)絡(luò)接入，更強(qiáng)的計(jì)算能力，更小的計(jì)算設(shè)備和更低的存儲(chǔ)成本。

不過(guò)，他同時(shí)也指出，大數(shù)據(jù)不僅帶來(lái)對(duì)軟件技術(shù)、編程語(yǔ)言的挑戰(zhàn)，同時(shí)也讓人類(lèi)社會(huì)面臨著能耗挑戰(zhàn)，因?yàn)槟壳叭蚍秶鷥?nèi)的數(shù)據(jù)中心服務(wù)器和散熱系統(tǒng)每年大概需要消耗30億瓦的電能，而這相當(dāng)于20座核電站的發(fā)電量。一個(gè)大型數(shù)據(jù)中心的能耗非常巨大，甚至比一座中型美國(guó)城市的耗電量還要高。

“歷史上設(shè)計(jì)計(jì)算機(jī)系統(tǒng)的主要目標(biāo)是充分發(fā)揮CPU的計(jì)算性能，較少關(guān)心如何滿(mǎn)足持續(xù)的數(shù)據(jù)存取要求。現(xiàn)在存儲(chǔ)問(wèn)題尚未解決，又遇上大數(shù)據(jù)應(yīng)用，計(jì)算機(jī)系統(tǒng)的負(fù)載發(fā)生了本質(zhì)性變化，雖然CPU進(jìn)展很快，每年50%~60%的增長(zhǎng)，但負(fù)載增加更大，以前數(shù)據(jù)是圍著CPU轉(zhuǎn)的，現(xiàn)在變過(guò)來(lái)了，是圍繞數(shù)據(jù)轉(zhuǎn)?！崩顕?guó)杰院士認(rèn)為，計(jì)算機(jī)系統(tǒng)結(jié)構(gòu)需要革命性的重構(gòu)，重點(diǎn)是數(shù)據(jù)如何“搬運(yùn)”，要由過(guò)去的“大象搬木頭”轉(zhuǎn)變?yōu)椤拔浵伆岽竺住薄?/span>

李國(guó)杰院士透露，中科院網(wǎng)絡(luò)數(shù)據(jù)科學(xué)與技術(shù)重點(diǎn)實(shí)驗(yàn)室的“天璣網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)”，已經(jīng)完成了面向網(wǎng)絡(luò)大數(shù)據(jù)、金融大數(shù)據(jù)處理的一體機(jī)原型系統(tǒng)，并已經(jīng)在淘寶、騰訊等相關(guān)企業(yè)和大數(shù)據(jù)情報(bào)處理領(lǐng)域進(jìn)行了試用。

中國(guó)工程院院士柴天佑則描述了工業(yè)大數(shù)據(jù)的特殊：數(shù)據(jù)量大、類(lèi)型多、變化速度快，復(fù)雜工業(yè)系統(tǒng)中許多機(jī)理不清，難以用數(shù)學(xué)模型來(lái)描述其特征，大數(shù)據(jù)的應(yīng)用技術(shù)為研究復(fù)雜工業(yè)系統(tǒng)開(kāi)辟了新途徑。

大數(shù)據(jù)研究和應(yīng)用不能“忽悠”

“大數(shù)據(jù)是什么呢？每個(gè)人都有每個(gè)人的理解，我自己也是帶著問(wèn)題來(lái)的?！?013年中國(guó)計(jì)算機(jī)學(xué)會(huì)海外杰出貢獻(xiàn)獎(jiǎng)獲得者、美國(guó)特拉華大學(xué)電子與計(jì)算機(jī)工程終身教授高光榮在做大會(huì)報(bào)告時(shí)，展示了“瞎子摸象”的照片。這位從事計(jì)算機(jī)系統(tǒng)結(jié)構(gòu)研究的國(guó)際知名學(xué)者介紹了自己近些年從事數(shù)據(jù)研究的成果。不過(guò)，他認(rèn)為“大數(shù)據(jù)”的提法過(guò)熱，明顯有炒作的味道，急于求成，“做研究不要貪快，有些研究不會(huì)立竿見(jiàn)影，一項(xiàng)研究工作需要很多年。無(wú)論是美國(guó)還是中國(guó)，我們?cè)诖髷?shù)據(jù)研究上，都才剛剛開(kāi)始?！彼昧艘粋€(gè)新學(xué)會(huì)的詞：不能“忽悠”。

不過(guò)，在大數(shù)據(jù)主題論壇上，高光榮教授仍未得到答案。

當(dāng)李國(guó)杰院士從系統(tǒng)結(jié)構(gòu)的角度，柴天佑院士從工業(yè)應(yīng)用，鄂維南院士是從數(shù)學(xué)的角度，梅宏院士從軟件的角度進(jìn)行一一闡述之后，一名學(xué)生提出了一個(gè)問(wèn)題：“能不能請(qǐng)各位老師用一句話(huà)說(shuō)說(shuō)大數(shù)據(jù)的本質(zhì)是什么？大數(shù)據(jù)帶來(lái)什么樣的變化？”

一句話(huà)說(shuō)清一個(gè)問(wèn)題似乎讓主講者都有些為難。

柴天佑院士認(rèn)為，從用大數(shù)據(jù)進(jìn)行研究的角度來(lái)談，超出現(xiàn)有的理論方法技術(shù)、工具，能處理一個(gè)數(shù)據(jù)群就叫大數(shù)據(jù)。

而李國(guó)杰院士認(rèn)為，大數(shù)據(jù)被“大”字給忽悠了，它更多的是多樣化、變化快，不僅有快數(shù)據(jù)，還有真?zhèn)蝺煞矫娴臄?shù)據(jù)。大數(shù)據(jù)是一個(gè)處理數(shù)據(jù)的方法，不是數(shù)據(jù)本身的規(guī)模。

梅宏直接表示很難回答：“大數(shù)據(jù)這個(gè)詞不是技術(shù)生產(chǎn)科學(xué)意義比較明確的定義，它給人的聯(lián)想太多的空間了。用一句話(huà)我說(shuō)不出來(lái)?！?/span>

之前，他提到大數(shù)據(jù)將不會(huì)是一個(gè)可完全“解決”的問(wèn)題，只能是逐步“逼近”、緩解的技術(shù)，目前尚不存在有效的大數(shù)據(jù)技術(shù)。

針對(duì)研究人員如何獲數(shù)據(jù)的問(wèn)題，李國(guó)杰院士回答，政府應(yīng)該是首要的公眾數(shù)據(jù)來(lái)源者，政府掌握大量的各類(lèi)數(shù)據(jù)，但是現(xiàn)在數(shù)據(jù)公開(kāi)還沒(méi)有做好。此外，研究人員還可以向企業(yè)要數(shù)據(jù)，通過(guò)協(xié)議相互交換，搞技術(shù)的、做科學(xué)研究的共同交流才能出成果。

大數(shù)據(jù)研究人員短缺

計(jì)算機(jī)大會(huì)的特邀講者，來(lái)自美國(guó)北卡來(lái)羅納州立大學(xué)分校史德利·阿霍爾特（Stahley.Ahalt）教授是創(chuàng)新計(jì)算研究所的負(fù)責(zé)人，他認(rèn)為，大數(shù)據(jù)已經(jīng)存在，需要新的工具來(lái)使數(shù)據(jù)消費(fèi)者進(jìn)行大規(guī)模應(yīng)用。

在他看來(lái)，數(shù)據(jù)的產(chǎn)生者包括大學(xué)、政府、醫(yī)療保健機(jī)構(gòu)、工業(yè)界等，而數(shù)據(jù)使用者是科學(xué)家、公民、政府、醫(yī)務(wù)人員、商業(yè)界?！皬?010年開(kāi)始，每?jī)商飚a(chǎn)生的數(shù)據(jù)就相當(dāng)于歷史上到2003年產(chǎn)生的數(shù)據(jù)總和。所以需要數(shù)據(jù)科學(xué)，對(duì)這些數(shù)據(jù)進(jìn)行分析、挖掘，利用?；ヂ?lián)網(wǎng)使得數(shù)據(jù)的移動(dòng)、共享和發(fā)現(xiàn)更容易；更快的處理器，更多和更廉價(jià)的存儲(chǔ)容量”

他介紹了大數(shù)據(jù)在美國(guó)社會(huì)管理、風(fēng)暴潮預(yù)測(cè)以及生物基因診斷方面的成功應(yīng)用。一家名為美國(guó)快捷藥方的公司宣稱(chēng)已有10億個(gè)藥方數(shù)據(jù)用于分析，使病人的郵購(gòu)處方更為合理經(jīng)濟(jì)。他們通過(guò)預(yù)測(cè)模型，找到了400個(gè)影響因素，來(lái)發(fā)現(xiàn)因病人不遵循用藥規(guī)定帶來(lái)的風(fēng)險(xiǎn)，而這一項(xiàng)每年帶來(lái)的損失高達(dá)3170億美元。UPS公司通過(guò)分析從成千上萬(wàn)臺(tái)送貨車(chē)上傳感器傳回的數(shù)據(jù)，減少530萬(wàn)英里行程，減少發(fā)動(dòng)機(jī)的閑置達(dá)1000萬(wàn)分鐘，節(jié)省65萬(wàn)加倫的燃料，減少二氧化碳排放量達(dá)6500公噸。

阿霍爾特教授提供了一系列數(shù)字，大數(shù)據(jù)的應(yīng)用可以使美國(guó)每年節(jié)省醫(yī)療節(jié)省費(fèi)用達(dá)到3000億美元，這相當(dāng)于西班牙全年的醫(yī)療保健花費(fèi)；歐洲公共管理部門(mén)每年可節(jié)省2500億歐元；節(jié)省1%的汽油油耗，15年可以節(jié)省680億美元；采用數(shù)據(jù)信息決策的公司，可使生產(chǎn)率提升5%~6%。

而因?yàn)榇髷?shù)據(jù)開(kāi)發(fā)及使用，也可以創(chuàng)造無(wú)數(shù)新的工作機(jī)會(huì)。全球范圍內(nèi)，到2015年，大數(shù)據(jù)和分析工作機(jī)會(huì)有望超過(guò)400萬(wàn)個(gè)。

每個(gè)大數(shù)據(jù)的工作能夠產(chǎn)生3個(gè)相關(guān)的工作。對(duì)于美國(guó)而言，到2015年，將有190萬(wàn)新的大數(shù)據(jù)工作機(jī)會(huì)，但將由于人才短缺，僅有1/3的崗位能招到人。2020年，美國(guó)針對(duì)數(shù)據(jù)相關(guān)的管理員和軟件開(kāi)發(fā)者的需求預(yù)計(jì)增長(zhǎng)約32%。

在2012年的一項(xiàng)調(diào)查中，78%的被調(diào)查者認(rèn)為確實(shí)存在大數(shù)據(jù)方面的人才短缺。那么大數(shù)據(jù)科學(xué)家要具備什么樣的IT技能呢？阿霍爾特表示，數(shù)據(jù)科學(xué)家要對(duì)計(jì)算機(jī)科學(xué)背景有全面了解，包括對(duì)應(yīng)用軟件、建模、數(shù)據(jù)、分析等，要有商業(yè)頭腦，以及對(duì)數(shù)據(jù)提煉融合的能力。數(shù)據(jù)科學(xué)家還“必須能夠獲取數(shù)據(jù)集，對(duì)它們進(jìn)行數(shù)學(xué)建模，以及懂得建立模型的所需要的數(shù)學(xué)理論。他們必須能發(fā)現(xiàn)并闡明數(shù)據(jù)揭示的問(wèn)題，即從數(shù)據(jù)中發(fā)現(xiàn)合適的問(wèn)題?！?/span>

河南億恩科技股份有限公司(mszdt.com)始創(chuàng)于2000年，專(zhuān)注服務(wù)器托管租用，是國(guó)家工信部認(rèn)定的綜合電信服務(wù)運(yùn)營(yíng)商。億恩為近五十萬(wàn)的用戶(hù)提供服務(wù)器托管、服務(wù)器租用、機(jī)柜租用、云服務(wù)器、網(wǎng)站建設(shè)、網(wǎng)站托管等網(wǎng)絡(luò)基礎(chǔ)服務(wù)，另有網(wǎng)總管、名片俠網(wǎng)絡(luò)推廣服務(wù)，使得客戶(hù)不斷的獲得更大的收益。
服務(wù)器/云主機(jī) 24小時(shí)售后服務(wù)電話(huà)：0371-60135900
虛擬主機(jī)/智能建站 24小時(shí)售后服務(wù)電話(huà)：0371-55621053
網(wǎng)絡(luò)版權(quán)侵權(quán)舉報(bào)電話(huà)：0371-60135995
服務(wù)熱線(xiàn)：0371-60135900