大數據的力量
內容描述
<本書特色>
大數據的時代聖戰已經來到!
鴻海董事長郭台銘表示,大數據是未來趨勢,將來會在大陸貴州、天津、深圳與台灣高雄成立大數據中心。
現今的時代是數字分析生存時代每一間公司至終都會是科技公司
大數據,又稱為「巨量資料」,早已存在於你我的生活當中,我們工作生活的各個面向都離不開大數據,數字分析可以預防犯罪、預測天災、改善效率、企業轉型、拓展業務、提升服務。
這是歷史技術進化的必然結果,決勝未來的唯一途徑。
<本書簡介>
當前,人們對大數據充滿了追捧、探索、困惑與質疑,千差萬別的態度恰恰反映了對大數據的普遍關心。作者近年一直致力於追蹤國內外大數據領導者的動態,從資料應用所需資料、人才和核心技術等層面對大數據進行了全面而系統的分析和解讀,以期幫助企業提升效益與核心競爭力,改變企業目前所處的競爭格局。 這是一本大數據入門讀物,作者試圖透過鮮活的案例和創新的探索,把大數據的力量展示出來。應用案例既有趣又充滿智慧,內容包含法我們工作生活的各個面向。 ※書籍推薦人李國慶當當網聯合總裁 ※推薦文推薦序
大約兩年前,我曾為帕科•昂德希爾的《顧客為什麼購買》一書做序。在那本書中,作者向讀者展示了實地調研的獨特方法和驚人發現,呈現了消費者在購物時的行為特徵,為零售業者提供了理解消費者的有效途徑。兩年過去了,「移動互聯網」、「雲端運算」、「大數據」技術接踵而來,新技術不再只是專家學者手中的玩物,也深深地影響著商業實踐。我仍然堅信,商家如果不能緊隨經濟、技術、社會的發展而不斷變化,就可能遭受慘敗。大數據技術和應用的不斷成熟,為商家,特別是電子商務企業,站在昂德希爾等學者的肩上,更進一步地瞭解消費者,揣摩其心理、滿足其需求提供了更有力的支撐。當當網作為中國電子商務領域的領軍企業,經過多年經營,累積了豐富的數據資源,並且一直在採取數據分析的方法指導企業決策和營運,可以說大數據在當當網是進行式。電子商務經濟是名副其實的「注意力經濟」。沒有客流的導入,轉化率就是空談。我們基於數據分析和搜索引擎優化,獲得了海量訪問;透過對頁面的優化,提升了轉化率。滿足消費者個性化需求,體現在以數據為基礎的演算法上。根據消費者留下的點點痕跡,我們可以為其推薦最符合其需求的商品,不管是在購物過程中,還是透過行銷郵件取得聯繫。我們也可以瞭解他從其他網站轉來的原因,彌補他的缺憾。「大數據」行銷已經跨越了傳統的分組、分類、抽樣的CRM,直接利用海量資料,一對一行銷成為了現實。數據分析可以解決傳統商業營運的弊端。長期以來,商業經常面臨的難題是供需資訊交流不暢,產品積壓此起彼伏。當當網經營了上百萬種商品,積壓和斷貨現象卻很少,就在於我們可以建立模型,透過對數據的處理,準確預測銷售走勢。當當網是國內圖書銷售的龍頭企業,也是數位化閱讀的積極探索者。無論是電子書終端還是數位版圖書,都在不斷推陳出新。讀者的注釋、點評、分享等都在提供著紙質版圖書無法提供的海量資訊。基於此,當當網將有可能為內容的創造提供依據,引領國內數位出版產業的走向。我們注重數據的累積。當當網從交易、營運、多種管道中累積數據資源。在移動商務深入普及的今天,當當網的移動端交易和移動端服務水準也獲得了極快的增長。甚至我們的內部營運,包括物流、倉儲、支付等環節也都與移動通信、物聯網應用等緊密集成。數據資源本身也可以產生新資料產品,如當當網可以在即時廣告平台上大展身手,將細分客戶資源提供給不同的廣告客戶。當當網數據的累積和應用,已經形成了良好迴圈。當然,關注「大數據」的人們(包括各類決策者在內)仍然對這一新事物瞭解不多,或者浮於概念表面,或者對技術辭彙的堆積心生厭倦。而郭昕、孟曄編著的這本《大數據的力量》,以豐富的案例、通俗的解讀,為解決這一困惑提供了幫助,是一本很好的「大數據」知識普及本。田溯寧先生曾向我描繪:將企業長時間累積的大數據集中存儲並冶煉,也許可以挖出很多寶石。對此我非常贊同。當然大數據在企業中的廣泛運用也面臨著許多挑戰:如能源方面,大數據應用催生儲存和計算的變革,大量電能的消耗難以避免;如技術創新方面,大數據的真正普及有賴於儲存和計算成本的大幅下降,而這需要技術上的不斷突破;如隱私方面,大數據收集和一對一行銷需要用戶許可,否則對隱私的肆意侵犯將令人不安,許可行銷時代才是基業長青的。我真心希望各界有識之士,與當當網一道充分利用「大數據」帶來的歷史機遇,在時代進步的浪潮中留下積極進取的痕跡。
李國慶當當網創始人、聯合總裁,中國書刊發行業協會副會長 ※審定者簡介
大同大學 資訊經營系 廖文華 主任 審定
<作者簡介>
郭昕現職:北京雲基地首席顧問雲華時代智能科技有限公司董事長
積極開始倡導產業升級和企業轉型,致力於開創以雲端技術為基礎的雲端化管理商務平台,提出了「所有企業都是IT轉基因企業」,「企業的核心競爭力是整合資源的能力」等理論。曾領導蓋洛普和IDC等全球頂級跨國諮詢公司大中華區業務長達20年,擁有豐富的企業發展戰略和企業管理諮詢的實戰經驗。
孟曄現職:北京雲華時代智能科技有限公司產業研究總監主要研究領域為雲端計算產業發展趨勢、電子商務服務業演進規律、服務業規劃及市場營銷實踐。
<本書目次>
第一章 破解大數據興起之謎1-1 大數據真的是大熱門嗎?1-2 霧裡看花,大數據到底是什麼?1-3 何種力量推動了大數據的興起?
第二章 感受大數據迎面衝擊 2-1 拓寬科學研究視野2-2 變革教育與人力資源管理觀念2-3 提升醫療與健康服務水準2-4 改善能源利用效率2-5 保障城市生活品質2-6 助力國家事務處理2-7 推動工農業轉型升級2-8 促進金融業務創新2-9 加速運動產業資訊化2-10 塑造零售業營運新模式2-11 釋放電子商務與網際網路應用潛力
第三章 爭奪大數據戰略資源 3-1 戰略儲備 ─ 商業巨頭擁「數」自重3-2 捷足先登 ─ 歐美列強搶灘布局
第四章 追蹤大數據領軍者動向 4-1 SAS ─ 高性能數據分析研發的重鎮4-2 IBM ─ 一切智慧的王者4-3 SAP ─ 企業資源管理的巨擘4-4 天雲趨勢 ─ 大數據開發的新銳力量4-5 維富友 ─ 淘寶雙十一狂歡的背後英雄
第五章 引爆大數據人才戰爭5-1 大數據人才徵集令5-2 呼喚創新的教育培訓變革5-3 開發數據寶藏的創業精神
第六章 揭祕大數據關鍵技術6-1 智慧之道 ─ 數據挖掘技術6-2 高效之道 ─ 分散式計算技術6-3 即時之道 ─ 記憶體計算6-4 投向更廣闊的技術視域 ─ 雲端運算、物聯網、行動運算
第七章 描繪大數據發展前景7-1 大數據時代的企業管理變革7-2 大數據豐富了統計方法並對商業模式及經濟效益產生影響7-3 國內外大數據產業的主要動向及挑戰7-4 中國發展大數據產業的對策建議
<內容試閱>
1-1 大數據真的是大熱門嗎?可以給您一個肯定的回答,沒錯,「大數據」(又譯「巨量資料」)確實是近年來最熱門的IT辭彙之一。從新聞媒體長篇累牘的報導(記者有了好的寫作題材),到學術文章的數量劇增(專家學者也在跟進研究),再到圖書市場的追捧(新的獲利來源),都說明了這一點。與大數據相關的會議及論壇活動中,參與人員也不再局限於IT專業人士,包括政府官員、企業家甚至文化學者在內的社會各界人士均有參與。這個話題真的是太吸引人了。對「大數據」以勢如破竹之勢改變世界的「魔力」,人們更多是從新聞報導中獲知的。讓我們也從新聞熱潮中感受一下全社會對「大數據」的關注與熱情吧!地震預測呼喚大數據突如其來的地震災難,造成了嚴重的人員傷亡和財產損失,讓民眾陷入了異常悲傷的情緒之中。面對地質災害的威脅,人們很自然地希望透過先進的技術手段得到提前預警,在對突發情況的處置中贏得主動權。對於這一願望,專業人士指出在地震預測實踐中已經採用了大數據處理和分析的方法,在未來我們可以藉助大數據,做出更好的預判。用數據監控形成預警網是目前地震、火山等自然災害預測的主要方法。美國在黃石火山安放了幾百個觀測儀器,數據即時傳遞到預警系統,然後透過網際網路對外發布。觀測數據分為兩部分,一部分是常規數據,另一部分是異常突發數據。異常突發數據越多,發生自然災害的可能性就越大。所以預警系統主要是對這些異常數據進行快速判斷和反應。日本311大地震震前兩分鐘,災害警報即已全國發布,也證明了可以透過監測地震源,在發生地震後,馬上透過無線電系統對外發送應急廣播,透過電視,手機簡訊等多手段通知受災區域,從而為人員安全和轉移財產贏得時間。2012年2月中國的地震預警系統,也是基於這個原理,成功預測了雲南巧家5級地震。目前中國地震局「國家地震烈度速報與預警工程」計畫投入20億元,用5年時間建設覆蓋全中國的國家地震強度速報與預警系統,該系統將由5000多個台站組成。
相親活動也愛大數據在日本和歌山紀美野町舉辦的相親派對中,數據獲取及分析也得到了應用,這反映出大數據對人們日常生活日益增強的滲透作用。紀美野町舉辦相親派對的初衷,是為了給未婚青年男女提供更多的結識機會,以緩解人口數量較少的該地區青年人未婚率過高的問題。在派對上,未婚男女先是自我介紹,晚宴上可以自由交流,在諮詢調查過程中寫出合乎心意的異性姓名,活動最後則公布速配成功的男女。為了提高配對成功的比率,活動舉辦者希望藉助先進的數據獲取和分析工具,改進活動的舉辦方式,並對參加者提供交友建議。參加相親派對的男女都被要求佩戴胸卡式感測器。在活動過程當中,這個感測器可以即時取得參加者在相親活動中的一系列數據,包括了與異性交流情況以及進展速度等。在活動舉辦前,宣傳單、諮詢視窗以及技術人員的講解,使參加者解除了害怕交談內容被記錄從而洩漏個人隱私的顧慮,大數據相親活動得以順利進行。實際活動中,參加者非常投入,對於佩戴感測器一事並不在意,而且也有參加者希望了解速配成功男女的交流方式,得到工作人員的指導和幫助。日立製作所和系統集成商JSOL為相親派對的主辦方提供了數據獲取和分析技術的支援。獲取的數據在日立提供的系統中進行分析,整個活動情況被製成組圖,將每個人的交流情況等給予視覺化展示(個人基本資訊不含在內)。派對主辦方以此為基礎,研究交流方式和配對成功的關鍵要素。以前活動結束後,主辦方會聽取參加者的意見,但較為主觀,過多依賴工作人員的感覺。而透過大數據的方式,則可以為完善活動細節、為參加者提供建議和數據支援。
大數據保證美劇熱播由著名演員凱文.史貝西(Kevin Spacey)主演,知名導演大衛.芬奇(David Fincher)執導的美劇《紙牌屋》(House of Cards)受到了美國及其他40多個國家與地區觀眾的追捧,可謂是2013年最紅的劇集之一。這樣一部美劇的走紅,竟然也與大數據分析有著不解之緣。原來這部劇是由全球最大的線上影片租賃服務商奈飛公司(Netflix)花費1億美元買下版權後開拍的。每一年的美劇競爭都異常激烈,即使彙集了最好的演員和導演,劇本也出色,播出效果依然存在很大的不確定性。但奈飛公司在開拍之前就有較大的獲勝把握,這有賴於它對長期以來用戶租賃、觀看數據的積累與分析。奈飛公司擁有大量的付費用戶,美國有2700萬,其他國家和地區有600萬。調查顯示,美國每天網路下載量高峰與奈飛公司的串流媒體服務直接相關。用戶每天產生3000多萬個行為(暫停、重播或者快進等),付費用戶每天還做出400萬個評分,搜索請求也高達300萬次。在這些數據資源上進行分析,可以說奈飛公司對用戶喜歡什麼樣的電影和電視劇集,乃至喜歡哪一個鏡頭都有著較為準確的認識。大數據分析的運用對影視產業將產生更為深遠的影響。
大數據讓明星更紅Lady Gaga作為流行歌手,2010年被《時代》雜誌評為百大最有影響力文化人物之一,2011年6月被《富比士》雜誌評為世界百位名人之首。專輯銷量在全球已超過2000萬張,單曲銷量達到6400萬張。她擁有超過3100萬的Twitter跟隨者以及5100萬Facebook粉絲。Lady Gaga的成功除了標新立異的裝扮、風格獨特的演唱外,其團隊對商業運作的精確掌控也是關鍵。Lady Gaga經紀人特洛伊.卡特(Troy Carte)是其中的核心人物。特洛伊.卡特體認到,Lady Gaga演藝生涯的成功,商業回報的多寡,有賴於透過社交網路與粉絲的熱烈互動,以及隨之而產生的大數據。Twitter和Facebook一類的社交網路有助於吸引成千上萬的粉絲與明星互動。但是在這些平台上粉絲數量的多寡並不一定代表CD或演唱會門票的銷售規模。因此必須收集和分析來自網路和銷售現場的數據,以獲得更深刻的商業分析。特洛伊.卡特為使社群關係更緊密,創立了以Lady Gaga為核心的社交網路Littlemonsters.com,並成功聚攏其百萬死忠粉絲。他和他的同事還擁有專有演算法。透過在這一社群加強宣傳推廣和深入挖掘數據中體現出的粉絲需求,指導進一步的商業運作,以期獲得更好的回報。