【讀書筆記】巧說《大數(shù)據(jù)》

《大數(shù)據(jù)》徐子沛著 廣西師范大學(xué)出版社 2012年七月第一版

一、前言

?隨著大數(shù)據(jù)時代真真正正地來臨冯勉,無處不在的大數(shù)據(jù)對如今的生活產(chǎn)生了巨大的影響澈蚌。2015年大數(shù)據(jù)這個詞更是被炒的火熱,連各種講座灼狰,也因冠上了“大數(shù)據(jù)”的名號而被廣泛宣傳宛瞄。而大數(shù)據(jù)究竟是什么呢?它是怎樣存在于我們的生活交胚。讀過《大數(shù)據(jù)》這本書份汗,或許才有了一點了解。

? 大三寒假放假前在圖書館看到了這本書承绸,想到15年秋招有學(xué)長被某司面試官問到你眼中的“大數(shù)據(jù)”是怎樣的?借到了這本書挣轨,寒假時家里的環(huán)境太過溫馨军熏,所以并沒有讀這本書,收假后卷扮,又重新續(xù)借荡澎。這才正式看《大數(shù)據(jù)》,不由得為了自己的懶癌找了個大大的借口晤锹。最終利用三天課余時間看完了全書摩幔。

二、這本書講了什么

? 這本書以美國多半個世紀(jì)信息開放鞭铆、技術(shù)創(chuàng)新的歷史或衡,利用一些經(jīng)典的案例來闡述究竟什么是大數(shù)據(jù)?它在現(xiàn)實中以怎樣的形式存在车遂,起到了什么作用封断。其中包括:奧巴馬建設(shè)“前所未有的開放政府”的雄心、公開財政透明的曲折舶担、《數(shù)據(jù)質(zhì)量法》背后的隱情坡疼、全民醫(yī)改法案的波瀾、統(tǒng)一身份證的百年糾結(jié)衣陶、街頭警察的創(chuàng)新傳奇柄瑰、美國礦難的悲情歷史、商務(wù)智能的前世今生剪况、數(shù)據(jù)開放運動的全球星期教沾,以及云計算、Facebook和推特等社交媒體译断、Web3.0與下一代互聯(lián)網(wǎng)的未來圖景等详囤,數(shù)據(jù)創(chuàng)新給公民、政府、社會帶來的種種挑戰(zhàn)藏姐。

? 全書雖以美國為主體隆箩,但也反觀中國的現(xiàn)實問題。

? 大數(shù)據(jù)之所以產(chǎn)生羔杨,是因為今天無處不在的傳感器和微處理器捌臊。使用機械或電子設(shè)備都會留下數(shù)據(jù)痕跡,這些痕跡表明了他的性能兜材、位置或狀態(tài)理澎。這些設(shè)備和使用它們的人,通過互聯(lián)網(wǎng)互相交流曙寡,形成了龐大的數(shù)據(jù)源糠爬。這些數(shù)據(jù)源和其他來源的數(shù)據(jù)相結(jié)合后被使用,形成了大數(shù)據(jù)举庶。

? ?要抓住大數(shù)據(jù)的機遇执隧,必須要做到以下幾點:從技術(shù)角度來說,需要收集并且開發(fā)特定的工具户侥,來管理大規(guī)模并行服務(wù)器產(chǎn)生的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)镀琉,(這些數(shù)據(jù)可能是自己專有的,也可能來源于"云")當(dāng)然有了數(shù)據(jù)蕊唐,還得需要分析屋摔,那么分析軟件就是用來挖掘數(shù)據(jù)的意義。

三替梨、大數(shù)據(jù)起到了哪些重要的作用

1钓试、奧巴馬上任第一天簽署的總統(tǒng)備忘案《透明和開放的政府》,其中講到

(1)政府應(yīng)該是透明的副瀑。政府將根據(jù)法律和政策亚侠,采取適當(dāng)?shù)卮胧员愎姴樵兯咨取@取的方式發(fā)布信息硝烂,各部門要利用現(xiàn)代信息技術(shù),將日常工作和決策的相關(guān)信息上網(wǎng)公示铜幽,以便公眾獲取滞谢。各行政部門和機構(gòu)還應(yīng)征求公眾的反饋,以確定哪些信息對公眾最有價值除抛。

(2)政府應(yīng)該是參與性的狮杨。政府需要從集體的智慧和信息中受益,各部門要就如何增加和改善公眾參與政府決策這個問題到忽,廣泛征求公眾的建議橄教。

(3)政府應(yīng)該是多方協(xié)作的清寇。各行政部門和機構(gòu)應(yīng)利用新的工具、方法和系統(tǒng)护蝶,在各部門华烟、各級政府之間全面協(xié)作。此外持灰,還要與非營利組織盔夜、企業(yè)和個人進行協(xié)作。各行政部門和機構(gòu)要廣泛征求公眾的反饋堤魁,以評估協(xié)作的效果喂链,確定新的協(xié)作機會。

在此妥泉,奧巴馬就巧妙的利用了大數(shù)據(jù)椭微,來提高和改善政府與民眾的關(guān)系,包括政務(wù)信息透明化以及辦公公眾參與化盲链。

在美國200多年的歷史中蝇率,作為總體開放政府的雄心,并不多見匈仗。但在開國之初瓢剿,美國的建國者就對信息的作用展開了思考和辯論逢慌∮菩《獨立宣言》(托馬斯、杰裴遜)攻泼、《管家法》火架、《信息自由法》(摩斯-信息自由法之父)等等都不同程度的提到了信息公開之類的信息,但對于公開哪部分內(nèi)容以及如何公開一直有著無法解決的矛盾忙菠。

2何鸡、數(shù)據(jù)美國

1998年,聯(lián)邦政府共擁有432所數(shù)據(jù)中心牛欢,專門負(fù)責(zé)各類數(shù)據(jù)的存儲和維護工作骡男。2010年,數(shù)據(jù)中心的總數(shù)躍升到2094所傍睹,翻了幾倍隔盛。

1996年,聯(lián)邦政府的年度IT預(yù)算是180億美元拾稳,2010年吮炕,以及高達(dá)784億美元,這些投資的一半以上都用在了購買存儲數(shù)據(jù)的硬件設(shè)備上访得。

數(shù)據(jù)的存儲單位

? ?最小數(shù)據(jù)集在美國演變成一個一般性的概念,它指代國家的管理層面針對某個業(yè)務(wù)管理領(lǐng)域強制手機的數(shù)據(jù)指標(biāo)们豌,對于養(yǎng)老院的管理望忆,美國國會規(guī)定,每個養(yǎng)老院必須提交一系列關(guān)于老人健康指標(biāo)的最小數(shù)據(jù)集給州政府的醫(yī)療管理部門杜耙,該部門匯總后,再提交聯(lián)邦政府的管理部門迎膜。

? 這樣的話泥技,對于老人就能更好的被服務(wù)。

?數(shù)據(jù)的生命力磕仅,甚至比程序更持久珊豹,程序可以不斷地升級、換代甚至退出使用榕订,但保存數(shù)據(jù)的數(shù)據(jù)庫會繼續(xù)存在店茶,其價值很可能與日俱增、歷久彌新劫恒。

? ?美國建立的“交通事故死亡報告分析系統(tǒng)”贩幻,隨著數(shù)據(jù)多年的積累,根據(jù)數(shù)據(jù)分析的結(jié)果两嘴,不斷進行調(diào)整丛楚,制定新的政策,新政策實施憔辫,再進行數(shù)據(jù)收集趣些,進行新一輪評估,周而復(fù)始贰您,再根據(jù)結(jié)果坏平,進行全國推廣。使得全國車禍出事率大大降低锦亦。

其通過:

(1)數(shù)據(jù)收集:建立收集網(wǎng)絡(luò)舶替,保證數(shù)據(jù)質(zhì)量

(2)數(shù)據(jù)分析:確定存在問題、研究新的政策杠园、評估政策績效

(3)數(shù)據(jù)分布:接受社會監(jiān)督顾瞪、鼓勵民間接入、推動政策復(fù)制抛蚁、調(diào)動政策競爭

3陈醒、大數(shù)據(jù)戰(zhàn)略將爭奪世界下一個前沿

? ?之所以要稱之為戰(zhàn)略,是因為“大數(shù)據(jù)”之“大”篮绿,并不僅僅在于其“容量之大”孵延,數(shù)據(jù)的收集、保存亲配、維護以及共享等任務(wù)尘应,都將成為具有研究意義的現(xiàn)象和挑戰(zhàn)惶凝。更多的意義在于:人類可以分析和使用的數(shù)據(jù)在大量增加,通過這些數(shù)據(jù)的交換犬钢、整合和分析苍鲜,人類可以發(fā)現(xiàn)新的知識,創(chuàng)造新的價值玷犹。

提取>存儲>分析>共享>可視化

4混滔、航班延誤分析系統(tǒng)

? ?近幾年來,在中國歹颓,因為航班延誤產(chǎn)生的各種糾紛常常成為熱點話題坯屿,美國當(dāng)然也會存在航班延誤的情況,但缺很少有沖突類似的情況巍扛。Data.gov上線后领跛,美國交通部開放全美航班起飛、到達(dá)撤奸、延誤的數(shù)據(jù)吠昭,程序員利用該數(shù)據(jù)開發(fā)了一個航班延誤分析系統(tǒng),該系統(tǒng)向全社會免費開放胧瓜,任何人都可以查詢?nèi)珖鞔魏桨嗟难诱`率以及機場等候時間矢棚,因其簡單、實用取得了極好的效果府喳。

該系統(tǒng)公布這些數(shù)據(jù)起到的作用:

(1)幫消費者找到表現(xiàn)最佳、最符合自己需要的航班劫拢。

(2)最大程度上降低了旅客等待時間的不確定性

(3)有利用推動航空市場的良性競爭肉津。

四强胰、總結(jié)

? ? 大數(shù)據(jù)在美國的各種應(yīng)用起到的效果舱沧,可以看出數(shù)據(jù)在當(dāng)今社會的重要性。我國龐大的人口偶洋,也需要大數(shù)據(jù)來快速的分析熟吏、總結(jié)。為大家的生活玄窝,工作牵寺,以及政府的發(fā)展都會帶來巨大的好處。當(dāng)然恩脂,這也不是一時能夠完成的帽氓,希望能夠在此多投入資金,把大數(shù)據(jù)利用起來俩块。


一只大三產(chǎn)品狗

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末黎休,一起剝皮案震驚了整個濱河市浓领,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌势腮,老刑警劉巖联贩,帶你破解...
    沈念sama閱讀 206,482評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異捎拯,居然都是意外死亡泪幌,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,377評論 2 382
  • 文/潘曉璐 我一進店門署照,熙熙樓的掌柜王于貴愁眉苦臉地迎上來祸泪,“玉大人,你說我怎么就攤上這事建芙≡〉危” “怎么了?”我有些...
    開封第一講書人閱讀 152,762評論 0 342
  • 文/不壞的土叔 我叫張陵岁钓,是天一觀的道長升略。 經(jīng)常有香客問我,道長屡限,這世上最難降的妖魔是什么品嚣? 我笑而不...
    開封第一講書人閱讀 55,273評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮钧大,結(jié)果婚禮上翰撑,老公的妹妹穿的比我還像新娘。我一直安慰自己啊央,他們只是感情好眶诈,可當(dāng)我...
    茶點故事閱讀 64,289評論 5 373
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著瓜饥,像睡著了一般逝撬。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上乓土,一...
    開封第一講書人閱讀 49,046評論 1 285
  • 那天宪潮,我揣著相機與錄音,去河邊找鬼趣苏。 笑死狡相,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的食磕。 我是一名探鬼主播尽棕,決...
    沈念sama閱讀 38,351評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼彬伦!你這毒婦竟也來了滔悉?” 一聲冷哼從身側(cè)響起蟀悦,我...
    開封第一講書人閱讀 36,988評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎氧敢,沒想到半個月后日戈,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,476評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡孙乖,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,948評論 2 324
  • 正文 我和宋清朗相戀三年浙炼,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片唯袄。...
    茶點故事閱讀 38,064評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡弯屈,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出恋拷,到底是詐尸還是另有隱情资厉,我是刑警寧澤,帶...
    沈念sama閱讀 33,712評論 4 323
  • 正文 年R本政府宣布蔬顾,位于F島的核電站宴偿,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏诀豁。R本人自食惡果不足惜窄刘,卻給世界環(huán)境...
    茶點故事閱讀 39,261評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望舷胜。 院中可真熱鬧娩践,春花似錦、人聲如沸烹骨。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,264評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽沮焕。三九已至吨岭,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間遇汞,已是汗流浹背未妹。 一陣腳步聲響...
    開封第一講書人閱讀 31,486評論 1 262
  • 我被黑心中介騙來泰國打工簿废, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留空入,地道東北人。 一個月前我還...
    沈念sama閱讀 45,511評論 2 354
  • 正文 我出身青樓族檬,卻偏偏與公主長得像歪赢,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子单料,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,802評論 2 345

推薦閱讀更多精彩內(nèi)容