站在大數(shù)據(jù)時(shí)代的浪潮之巔

(東北大學(xué)計(jì)算機(jī)學(xué)院夏令營心得總結(jié))

禁止轉(zhuǎn)載。

前記

從初了解東北大學(xué)計(jì)算機(jī)學(xué)院夏令營到現(xiàn)在,前前后后一個(gè)多月的時(shí)間。在這一個(gè)多月中,有困難有坎坷,有收獲有欣喜。無論結(jié)果如何,參加?xùn)|北大學(xué)計(jì)算機(jī)學(xué)院夏令營都是我在東大的時(shí)光中,難忘的一段回憶。

出生在這座美麗的城市,在沈陽生活了二十二年,這座城市的每個(gè)街道和角落都令我留戀。曾經(jīng),讀萬卷書而后渴望遠(yuǎn)走高飛背井離鄉(xiāng),后來,行過了萬里路,才方知家鄉(xiāng)是最好的港灣和歸宿。我喜歡讀書,讀納蘭容若,我哭了,那句聲聲催憶當(dāng)初,欲眠還展舊時(shí)書,那句淚與燈花落,無處不傷心,我深知他心傷,卻與之時(shí)光相隔;讀泰戈?duì)柲秋w鳥與秋葉的感傷,讀他那樵夫的斧頭和樹的為愛放棄;我讀顧城,那最狂的風(fēng),那最靜的海;讀北島,讀他的漂泊,讀他那句我不相信;讀沈從文,隨他去湘西,去云南,看那橋上綠葉紅花,橋下流水人家;也讀三毛,讀村上春樹,也讀過一些記不起名字的歐美作家。我喜歡旅行,漫步華燈初上的南鑼鼓巷和煙袋斜街,初春的鳳凰古城,銀裝素裹的果戈里大街和圣索菲亞大教堂,煙雨繚繞的大明湖畔。重巒中,風(fēng)吹柳動(dòng)蟬鳴,長街上,人馬川流不息,城墻下,那是來自時(shí)空盡頭的歷史和銘記。

我曾經(jīng)就讀于沈陽航空航天大學(xué),一所除了遼寧省外在二本招生的大學(xué)。我深知學(xué)習(xí)的機(jī)會(huì)來之不易,也深知學(xué)習(xí)環(huán)境和學(xué)術(shù)氛圍的重要性。我不甘,于是已經(jīng)讀了一個(gè)學(xué)期,成為學(xué)院佼佼者的我,在朋友的質(zhì)疑中,在同學(xué)的不解中,選擇了重新高考,四個(gè)月寒窗來到了計(jì)算機(jī)學(xué)科全國頂尖的東北大學(xué)。我想,我的故事并沒有結(jié)束,我喜歡計(jì)算機(jī)領(lǐng)域,喜歡這座城市,也喜歡這所學(xué)校。我深深的愛著他們,那是一種一想起來就會(huì)心潮澎湃的感覺。留在這里繼續(xù)深造,也慢慢成為我的理想和方向。兩天的夏令營時(shí)間雖短,然而與各位來自全國的同學(xué)的一同學(xué)習(xí),對我院的科研方向、對我們的校企的產(chǎn)業(yè)都有了深刻而全面的了解,使我受益匪淺,也更加堅(jiān)定了我在本校深造的決心。

我一直在追逐著一場夢,從未停下腳步。

站在大數(shù)據(jù)時(shí)代的浪潮之巔

—— 計(jì)算機(jī)學(xué)院夏令營講座及參觀東網(wǎng)科技有感

大數(shù)據(jù)一詞出現(xiàn)在大眾視野中,是近五年才開始的事情。我本人最早了解到大數(shù)據(jù)的概念,也是從那個(gè)時(shí)候,在新華書店的暢銷書柜臺(tái)上偶然發(fā)現(xiàn)了維克托教授所著的《大數(shù)據(jù)時(shí)代》一書。當(dāng)時(shí)粗略地翻了幾頁,尚還不能較為準(zhǔn)確的理解大數(shù)據(jù)一詞和它要表達(dá)的概念,但這個(gè)詞語卻深深地印在我的腦海之中。兩年后,我如愿進(jìn)入了東北大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)專業(yè)學(xué)習(xí),機(jī)緣巧合又與此書結(jié)緣,這才真真正正地拜讀了這本大數(shù)據(jù)的先河之作,對大數(shù)據(jù)的才有了較為全面的了解。

隨著互聯(lián)網(wǎng)和移動(dòng)設(shè)備的普及,光纖通信和第四代移動(dòng)通信的發(fā)展,加之物聯(lián)網(wǎng)的興起,信息的采集、傳播的速度和規(guī)模已經(jīng)到達(dá)空前的水平。大量的信息數(shù)據(jù)涌入人類社會(huì),每個(gè)人都是這些數(shù)據(jù)的產(chǎn)生者,也是信息社會(huì)所帶來便利的受用者。從爆炸式的海量數(shù)據(jù)中提煉價(jià)值,使之受用于人類社會(huì),是數(shù)據(jù)科學(xué)領(lǐng)域嶄新的研究方向,也是大數(shù)據(jù)概念的意義所在。

夏令營第一天,袁野教授的講座深入的為我們介紹了大數(shù)據(jù)的概念,大數(shù)據(jù)與數(shù)據(jù)庫的關(guān)系,和一些關(guān)于大數(shù)據(jù)的熱點(diǎn)問題。在講座中,袁野教授為我們詳細(xì)的講解了大圖數(shù)據(jù)的管理技術(shù),使我們對此有了更為明晰的認(rèn)識(shí)和了解。圖作為一種復(fù)雜的數(shù)據(jù)結(jié)構(gòu),廣泛的應(yīng)用于生物信息學(xué)、有機(jī)化學(xué)、社會(huì)關(guān)系學(xué)和其他客行各業(yè)的研究之中,大圖數(shù)據(jù)管理技術(shù)以此為研究背景,深入的探討了圖數(shù)據(jù)的集中式管理和分布式管理兩種管理方式。集中式圖數(shù)據(jù)管理,包括事務(wù)圖數(shù)據(jù)庫和大型網(wǎng)絡(luò)數(shù)據(jù)。其中事務(wù)圖數(shù)據(jù)庫又有基于圖特征、基于圖閉包、基于圖編碼三種索引類型,大型網(wǎng)絡(luò)數(shù)據(jù)有基于生成樹和基于不相交鏈的兩種編碼方式。分布式圖數(shù)據(jù)管理,消除了集中式管理的局限性,通過Map_Reduce、Pregel、Pegasus、Trinity等平臺(tái)使開發(fā)人員可以關(guān)注算法本身,而非系統(tǒng)實(shí)現(xiàn)。大數(shù)據(jù)尤其是大圖數(shù)據(jù),將是數(shù)據(jù)科學(xué)的前言發(fā)展方向。

在大數(shù)據(jù)概念出現(xiàn)之前,計(jì)算機(jī)科學(xué)領(lǐng)域非常依賴模型和算法。如果想得到精確的結(jié)論,需要建立模型來描述問題,同時(shí)需要理順邏輯,理解因果,設(shè)計(jì)精妙的算法來得出接近現(xiàn)實(shí)的結(jié)論。因此,一個(gè)問題,能否得到最好的解決,取決于建模是否合理,各種算法的比拼成為決定成敗的關(guān)鍵。然而,大數(shù)據(jù)的出現(xiàn)徹底改變了人們對于建模和算法的依賴。但數(shù)據(jù)越來越大時(shí),數(shù)據(jù)本身保證了數(shù)據(jù)分析結(jié)果的有效性。即便缺乏精準(zhǔn)的算法,只要擁有足夠多的數(shù)據(jù),也能得到接近事實(shí)的結(jié)論。

舉一個(gè)例子,在機(jī)器翻譯時(shí),并不必需設(shè)定各種語法和翻譯規(guī)則,而可以利用數(shù)據(jù)庫中收集的用戶的用詞習(xí)慣進(jìn)行比較推薦,通過檢查用戶的習(xí)慣,將最常用、出現(xiàn)頻率最高的翻譯方式推薦給用戶。在這個(gè)過程中,當(dāng)用戶行為的記錄數(shù)據(jù)越來越多時(shí),計(jì)算機(jī)就可以在不了解問題邏輯的情況下提供較為可靠的結(jié)果。

然而計(jì)算這樣大規(guī)模的數(shù)據(jù),靠單臺(tái)服務(wù)器是無法實(shí)現(xiàn)。強(qiáng)大的計(jì)算能力,是處理大數(shù)據(jù)的必然需求。大數(shù)據(jù)代表了互聯(lián)網(wǎng)的信息層,是互聯(lián)網(wǎng)智慧和意識(shí)產(chǎn)生的基礎(chǔ)。從技術(shù)上看,大數(shù)據(jù)與云計(jì)算的關(guān)系就像一枚硬幣的正反面一樣密不可分。大數(shù)據(jù)必然無法用單臺(tái)的計(jì)算機(jī)進(jìn)行處理,必須采用分布式架構(gòu),依托云計(jì)算的分布式處理、分布式數(shù)據(jù)庫和云存儲(chǔ)、虛擬化技術(shù)對海量數(shù)據(jù)進(jìn)行分布式數(shù)據(jù)挖掘。

物聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)再加上傳統(tǒng)互聯(lián)網(wǎng),每天都在產(chǎn)生海量數(shù)據(jù),而大數(shù)據(jù)又通過云計(jì)算的形式,將這些數(shù)據(jù)篩選處理分析,提前出有用的信息,這就是大數(shù)據(jù)分析??梢哉J(rèn)為,物聯(lián)網(wǎng)是大數(shù)據(jù)的數(shù)據(jù)來源,是數(shù)據(jù)收集的細(xì)枝末節(jié),云平臺(tái)、云計(jì)算作為計(jì)算資源的底層,支撐著上層的大數(shù)據(jù)處理,人工智能是大數(shù)據(jù)的應(yīng)用,是傳統(tǒng)的計(jì)算方法和大數(shù)據(jù)的數(shù)據(jù)科學(xué)結(jié)合的產(chǎn)物。通過物聯(lián)網(wǎng)產(chǎn)生、收集海量的數(shù)據(jù)存儲(chǔ)于云平臺(tái),通過大數(shù)據(jù)的分析,進(jìn)行深度學(xué)習(xí),使之更好的為人類社會(huì)所用,這是大勢所趨,是計(jì)算機(jī)科學(xué)領(lǐng)域乃至整個(gè)工業(yè)領(lǐng)域的發(fā)展方向。

夏令營的第二天,在東網(wǎng)科技的所見所聞同樣印證上述的觀點(diǎn)。東網(wǎng)科技是一家全球視野的數(shù)據(jù)與基礎(chǔ)設(shè)施服務(wù)商,由東北大學(xué)、政府及戰(zhàn)略投資者聯(lián)合創(chuàng)立,業(yè)務(wù)覆蓋云計(jì)算、大數(shù)據(jù)、智慧城市、空間信息、移動(dòng)互聯(lián)網(wǎng)等領(lǐng)域。東網(wǎng)科技以大數(shù)據(jù)時(shí)代的智慧生活為發(fā)展愿景,依托于強(qiáng)大的技術(shù)背景和極富實(shí)踐精神的運(yùn)營理念,面向政府、公共事業(yè)、企業(yè)及公眾提供優(yōu)質(zhì)、便捷、安全的數(shù)據(jù)及相關(guān)服務(wù)。東北區(qū)域超算中心由東網(wǎng)科技運(yùn)營,擁有1170萬億/秒的浮點(diǎn)計(jì)算能力,是東北地區(qū)最大的超級(jí)計(jì)算平臺(tái),也是東北及至東北亞地區(qū)開展科技研究、技術(shù)開發(fā)和產(chǎn)業(yè)創(chuàng)新的重要科技基礎(chǔ)設(shè)施。東網(wǎng)科技云計(jì)算中心致力于整合云計(jì)算全產(chǎn)業(yè)鏈的技術(shù)與產(chǎn)品,推動(dòng)云計(jì)算關(guān)鍵核心技術(shù)的自主研發(fā)與創(chuàng)新,以及典型共性技術(shù)的市場轉(zhuǎn)化和應(yīng)用。與此同時(shí),東北大學(xué)與東網(wǎng)科技聯(lián)合創(chuàng)立了大數(shù)據(jù)研究院,是國內(nèi)首家高校背景、有強(qiáng)大基礎(chǔ)設(shè)施和行業(yè)專家支撐的大數(shù)據(jù)產(chǎn)學(xué)研用一體化科研機(jī)構(gòu)。空間信息區(qū)域數(shù)據(jù)應(yīng)用中心再國防科工局指導(dǎo)下,由東北大學(xué)、東網(wǎng)科技聯(lián)合成立,具備在高分、資源、天繪、環(huán)境、風(fēng)云等國產(chǎn)高分辨率系列衛(wèi)星的遙感數(shù)據(jù)獲取、處理與規(guī)模應(yīng)用的核心優(yōu)勢。由東網(wǎng)科技的蓬勃發(fā)展可見,大數(shù)據(jù)與云計(jì)算的相輔相成的發(fā)展越來越成為IT行業(yè)尖端企業(yè)的發(fā)展趨勢。

大數(shù)據(jù)時(shí)代已經(jīng)來臨,如何從海量數(shù)據(jù)中發(fā)現(xiàn)知識(shí),尋找隱藏在大數(shù)據(jù)中的模式、趨勢和相關(guān)性,揭示社會(huì)現(xiàn)象和社會(huì)發(fā)展規(guī)律,以及可能的商業(yè)應(yīng)用前景,都需要我們擁有更好的數(shù)據(jù)洞察力。將看上去雜亂無章的數(shù)據(jù)經(jīng)過挖掘、加工和整理,從而得到了有意義的統(tǒng)計(jì)規(guī)律。大數(shù)據(jù)的分析方法改變了我們的思維方式,讓我們從傳統(tǒng)的因果關(guān)系向相關(guān)關(guān)系過渡,也改變了我們的生產(chǎn)方式,信息產(chǎn)品的加工愈加成為更重要的生產(chǎn)活動(dòng),同時(shí)也它也走進(jìn)我們的生活之中,改變了我們的生活方式。智慧物流、智慧交通、智慧醫(yī)療,一個(gè)個(gè)新興的產(chǎn)業(yè)嶄露頭角,未來的世界中“智慧”將無處不在,也正是大數(shù)據(jù)支撐這些智慧產(chǎn)業(yè)蓬勃發(fā)展。

吳軍博士所著的《浪潮之巔》一書中,講述了一個(gè)又一個(gè)時(shí)代的浪潮,從芯片行業(yè)到軟件行業(yè)再到移動(dòng)通信行業(yè),從商業(yè)模式到金融,從互聯(lián)網(wǎng)2.0到云計(jì)算。能否趕得上時(shí)代的浪潮,決定著企業(yè)的興衰成敗,也決定了個(gè)人的發(fā)展前景。正如在夏令營講座上袁野教授引用華羅庚先生所說的,“科學(xué)上沒有平坦的大道,真理長河中有無數(shù)礁石險(xiǎn)灘。只有不畏攀登的采藥者,只有不怕巨浪的弄潮兒,才能登上高峰采得仙草,深入水底覓得驪珠?!倍髷?shù)據(jù),或許正是這個(gè)時(shí)代的浪潮。我們,一群不斷追求上進(jìn)的弄潮兒,或許正站在這個(gè)大數(shù)據(jù)時(shí)代的浪潮之巔。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容