大數據只是賓語,離開了人這個主語,再大也沒有意義
9大行業應用╳15章專題精講╳84個應用案例
實例+理論,一本書讓你在最短的時間掌握大數據的祕密!
大數據即將開創資訊社會的嶄新時代,並改變我們看待世界的方式。
那麼大數據意味著什麼,它到底會改變什麼?
▎變革醫療衛生
大數據的到來,使很多醫院經營者們不再靠經驗和直覺習慣做決策,逐步轉變思考方式,透過對大量資料的探勘和運用,更多基於事實與資料分析做出決策。這對資訊技術人員來說是機遇也是挑戰,而這些影響都是大數據帶來的。
▎帶來商業革命
生產者是具有價值的人,而消費者是生產者價值的意義所在。
有意義的才有價值,消費者不認同的,就賣不出去,就實現不了價值;只有消費者認同的,才賣得出去,才實現得了價值。然而,大數據可以幫助我們從消費者這個源頭識別意義,從而幫助生產者實現價值。
▎改變人們思維
大數據改變了我們的思維,更多的商業和社會決策能夠「以資料說話」。
網際網路改變了人類交流的方式,而大數據不同,它標誌著社會處理資訊方式的變化。隨著時間推移,大數據可能真的會改變我們思考的方式。隨著我們利用越來越多的資料來理解事情和做出決定,我們很可能會發現生活的許多層面是隨機的,而不是確定的。
▎開啟時代轉型
大數據可以幫助我們「捕捉現在,預測未來」。
A和B事件如果經常一起發生,那麼注意到B發生,就能預測A也發生。這種關係已在零售業和電子商務中被廣泛運用。例如,某家便利超商透過分析零售終端的資料,得出「溫度低於攝氏15度時,暖暖包的銷售量便增加5%」的相關關係。於是,只要溫度低於這一度數,店內的暖暖包就會上架。
【Netflix】全球最大的商業影片串流供應商
美國最早嘗試將大數據和媒體行業相結合的串流服務商。
這家公司同時也成為吸收新增資料的「海綿」──使用者在看什麼、喜歡在什麼時段觀看、在哪裡觀看以及使用哪些設備觀看,爆增的資訊量成為Netflix手中的寶貴資產。他們甚至掌握著使用者在哪個影片的哪個時間點後退、快進或者暫停,乃至看到哪裡直接將影片關掉等資訊。
【Ancestry.com】建立更準確的血緣關係
幫助人們將自己與家庭史結合並創建獨一無二的樹狀家譜。
Ancestry網站包含了大量出生、死亡、人口普查以及其他相關紀錄,這些紀錄起初大多是非結構化資料,隨著使用者以及家族資料的不斷增加,Ancestry公司改善其資訊檢索的算法。Ancestry透過對唾液進行採樣,能夠對客戶的DNS進行排序並將結果與資料庫中的其他客戶加以匹配,客戶甚至可以找到多年沒有聯絡的表親。
★本書特色:本書共分為15章,詳細介紹與大數據相關的概念,包含商業變革、基礎建設、資料管理、風險管理、資訊通訊、解決問題等,內容豐富縝密。書中涵蓋數十個精彩應用案例,闡述細緻,讓讀者能夠用一本書精通大數據,邊學邊賺!
作者簡介:
李軍,程式設計師、資料分析師,擁有十年以上資料分析經驗,對商業資料敏感,熟悉Hadoop、hive等資料分析工具及Oracle等資料庫,能夠分析大數據條件下的消費者行為,並進行資料建模,實施結構化資料的管理。
章節試閱
展現價值,大數據的4大變革
大數據即將開創資訊社會的嶄新時代,它能夠改變我們看待世界的方式。那麼大數據意味著什麼,它到底會改變什麼?筆者認為,僅從技術和商業的角度回答,已不足以解惑。大數據只是賓語,離開了人這個主語,它再大也沒有意義。因此,我們需要把大數據放在人的背景中加以透視,理解它作為時代變革力量的所以然。
變革醫療衛生
大數據的影響也已經滲透到各個行業的應用當中,最具代表性的行業有網際網路、電商、金融、公共服務等,當然其中也包括醫療服務。醫療衛生行業作為典型的傳統行業,其IT網路的建設具有一定的行業複雜性與特殊性。但是,隨著醫療改革的逐步深入,醫療服務品質的提高相比於醫療服務效率的提升更加重要。那麼,如何在眾多醫療機構中突出自己的特色,做到真正的急患者所需,更好地為患者服務,才是醫院管理層真正關注的關鍵。
專家提醒
大數據的到來,使很多醫院經營者們不再靠差不多、經驗和直覺習慣做決策,逐步轉變思考方式,透過對大量資料的探勘和運用,更多地基於事實與資料分析做出決策。這對資訊技術人員來說是機遇也是挑戰,而這些影響都是大數據帶來的。
帶來商業革命
大數據不僅改變了醫療衛生領域,整個商業領域都因為大數據而重新洗牌。
在此,筆者首先要告訴大家一個「啟動內需」的原理:生產者是具有價值的人,而消費者是生產者價值的意義所在。有意義的才有價值,消費者不認同的,就賣不出去,就實現不了價值;只有消費者認同的,才賣得出去,才實現得了價值。然而,大數據可以幫助我們從消費者這個源頭識別意義,從而幫助生產者實現價值。
改變人們思維
網際網路重塑了人類交流的方式,而大數據則不同,它標誌著社會處理資訊方式的變化。隨著時間的推移,大數據可能真的會改變我們思考世界的方式。隨著我們利用越來越多的資料來理解事情和做出決定,我們很可能會發現生活的許多層面是隨機的,而不是確定的。
專家提醒家提醒
大數據的確改變了我們的思維,更多的商業和社會決策能夠「以資料說話」。不過拋開這所有的好處,如何讓大數據不侵入我們的隱私世界,也是與之伴生並需嚴肅考慮的問題。
開啟時代轉型
大數據的核心就是預測,相關關係可以幫助我們捕捉現在和預測未來,其帶來的技術變革將開啟一次重大時代轉型。
A和B事件如果經常在一起發生,那麼注意到B發生,就能預測A也發生。這種關係已在零售業和電子商務中被廣泛運用。例如,某家便利超商透過分析零售終端的資料,得出了「溫度低於攝氏15度時,暖暖包的銷售量便增加5%」的相關關係。於是,只要溫度低於這一度數,店內的暖暖包就會上架。
專家提醒醒
大數據時代最大的轉變就是,放棄對因果關係的渴求,取而代之關注相關關係。也就是說只要知道「是什麼」,而不需要知道「為什麼」。這顛覆了千百年來人類的思維慣例,對人類的認知和與世界交流的方式提出了全新的挑戰。
價值轉型,大數據下的商業智慧
如今,也許你並不了解大數據,但大數據的應用確實已經遍地開花。例如,金融行業透過大數據來鑑別個人的信用風險;快遞領域透過資料來確定行駛路線,減少等候時間;政府透過大數據來找出最容易發生火災和井蓋爆炸的地點;商場透過大數據發現產品之間的關聯。在大數據時代,一切都存在著可能,智慧商業帶來的價值轉型正在悄然發生,而我們也正在體驗這一切改變。
大數據為商業智慧構建基礎
DBA(Database Administrator,資料庫管理員)們都知道資料在任何商業智慧(Business Intelligence, BI)解決方案中都是最重要的部分。商業智慧作為一個工具,是用來處理企業中現有資料,並將其轉換成知識、分析和結論,幫助業務或者決策者做出正確且明智的決定的。商業智慧是幫助企業更好地利用資料提高決策品質的技術,其包含了從資料倉儲到分析型系統等。
商業智慧成就行業價值機會
1989年,商務智慧界「教父」──Howard Dresner 提出「商業智慧」的概念,不久後便被人們廣泛了解。當時將商業智慧定義為一類由資料倉儲(或資料集市)、查詢報表、資料分析、資料探勘、資料備份和恢復等部分組成的,以幫助企業決策為目的的技術及應用。
在大數據時代,企業如果想要搶奪大數據市場,就需要具備一定的實力,然而報表的呈現和簡易分析只是停留在「B」的階段,要想達到「I」的階段,必須要結合整個大環境、大行業的資料來判斷分析並給出真正有價值的資訊和決策建議,這取決於你能拿到多廣多深的資料和你的資料探勘分析能力以及建模能力。
商業智慧與大數據的區別在於,大數據能夠基於BI工具進行大容量資料處理和非結構化資料處理,與傳統基於事務的資料倉儲系統相比較,大數據分析不僅關注結構化的歷史資料,它們更傾向於對Web、社群網路、RFID感測器等非結構化大量資料進行分析,大數據無疑是對BI的一個完美補充。
BI導出商業潛能和社會走向
如今,傳統資料倉儲的性能已無法應付龐大的資訊,但是大數據技術使我們能夠訪問和使用這些寶貴的、大規模資料集,以應對越來越複雜的資料分析和更好的商業決策。
例如,當你在聽音樂時,Apple Music會推薦你可能喜歡的音樂;當你在Amazon下單某本書時,它會提醒購買這本書的人中有30%也購買了另外一本書,這些都是基於大數據分析的。大數據帶來的另一改變是,更多事物可以資料化。購物習慣可以資料化,社交關係可以資料化,社會焦點的走向也可以資料化(透過對搜尋關鍵字的分析)。這些資料可以導出商業潛能,更能導出社會走向。
隨著網際網路技術的發展,未來的大數據時代,將是各種資訊呈現規模化快速成長的狀態。如何更快獲取有用的資訊是關鍵,智慧分析工具會變得越來越重要,其可以凌駕於多個管理系統、資料庫之上。如何透過更靈活、可控的BI工具,真正探勘出大數據時代的價值,是大數據和BI面臨的共同挑戰。
探索全球,10大大數據部署方案
就在近兩年,大數據應用突然爆炸,五彩繽紛的創意都變成現實。即使最謹慎的觀察家也承認,大數據的商業應用時代已經來臨,這都源於它前所未有的「從大量到精準」的預測能力。因此,大數據被認為是下一個創新、競爭和生產力的領先發展,誰率先抓住大數據的先機即意味著能夠在未來市場競爭中取得標竿地位。
俗話說:「工欲善其事,必先利其器。」在大數據實踐之中,基礎架構就猶如基石一般,是構建一切的基礎,基礎架構基石不穩,大數據「大廈將傾」,具有優秀的基礎架構才能夠讓使用者在未來的大數據之路中越走越寬。本節筆者就帶大家一同回顧在世界各地那些不為人知卻實際存在的大數據基礎設施部署方案。
Netflix:掌握影片大數據煉金術
Netflix是一家線上影片租賃提供商,能夠提供超大數量的DVD,而且讓顧客可以快速方便的挑選影片,同時免費遞送。
Netflix已經成為全球最大的商業影片串流供應商──2021年第三季財報顯示,全球總訂閱數2.14億。這家公司同時也成為吸收新增資料的「海綿」──使用者在看什麼、喜歡在什麼時段觀看、在哪裡觀看以及使用哪些設備觀看,爆增的資訊量成為Netflix手中的寶貴資產。他們甚至掌握著使用者在哪個影片的哪個時間點後退、快進或者暫停,乃至看到哪裡直接將影片關掉等資訊。
IHS研究公司表示, Netflix的線上電影營收超過蘋果,並占據美國線上電影總銷量的45%,這主要得益於網路使用者對線上影片的強大需求。
在美國眾多的串流服務商裡,Netflix是最早嘗試將大數據和媒體行業結合起來的公司。現在Netflix公司開始推出自己的原創節目,而節目製作的依據正是剛剛提到的這些資料。例如,Netflix投資的電視劇「House of Cards」(紙牌屋),讓人們見識了大數據分析對Netflix這樣的新媒體公司的價值。
展現價值,大數據的4大變革
大數據即將開創資訊社會的嶄新時代,它能夠改變我們看待世界的方式。那麼大數據意味著什麼,它到底會改變什麼?筆者認為,僅從技術和商業的角度回答,已不足以解惑。大數據只是賓語,離開了人這個主語,它再大也沒有意義。因此,我們需要把大數據放在人的背景中加以透視,理解它作為時代變革力量的所以然。
變革醫療衛生
大數據的影響也已經滲透到各個行業的應用當中,最具代表性的行業有網際網路、電商、金融、公共服務等,當然其中也包括醫療服務。醫療衛生行業作為典型的傳統行業,其IT網路的建設具有一...
推薦序
前言
1. 基本概念:大數據是指一般的軟體工具難以捕捉、管理和分析的大容量資料,一般以「兆位元組」(terabyte, TB)為單位。大數據之「大」,並不僅僅在於「容量之大」,更大的意義在於透過對大量資料的交換、整合和分析,發現新的知識,創造新的價值,帶來「大知識」、「大科技」、「大價值」和「大發展」,使我們逐漸走向創新社會化的新資訊時代。(注:「數據」,也可稱「資料」)
2. 市場規模:根據IDC(國際資料公司)發布《2021年V2全球大數據支出指南》的預測,全球大數據市場的IT投資規模有望在2025年超過3,500億美元,五年預測期內(2021~2025)實現約12.8% 的年複合成長率(CAGR),較上個預測週期有所上升;其中,大數據服務將保持其主導地位,市場占有率在50%左右,企業透過持續增加對服務的投資來應對智慧化過程中的新挑戰。
3. 應用領域:大數據在企業商業智慧、公共服務和市場行銷三個領域擁有巨大的應用潛力和商機。今天,大數據似乎成了「萬靈藥」,從總統競選到奧斯卡頒獎、從Web 安全到災難預測,都能看到大數據的身影,正如那句俗語:「當你手裡有了錘子,什麼都看上去像釘子」。
大數據的推廣,已經滲透到了公共健康、臨床醫療、物聯網、社群網站、社會管理、零售業、製造業、汽車保險業、電力行業、博彩業、工業發動機和設備、影視遊戲、教育領域、體育領域、電信業等多個行業應用領域。
本書深度結合了大數據發展形勢,為讀者介紹了簡單易行的處理大數據所需的工具、過程和方法,並描繪了一個易於實施的行動計畫,以幫助讀者發現新的商業機會,實現新的業務流程,做出更明智的決策。
本書中所採用的圖片、模型等素材,均為所屬公司、網站或個人所有,在本書中引用僅為說明之用,絕無侵權之意,特此聲明。
前言
1. 基本概念:大數據是指一般的軟體工具難以捕捉、管理和分析的大容量資料,一般以「兆位元組」(terabyte, TB)為單位。大數據之「大」,並不僅僅在於「容量之大」,更大的意義在於透過對大量資料的交換、整合和分析,發現新的知識,創造新的價值,帶來「大知識」、「大科技」、「大價值」和「大發展」,使我們逐漸走向創新社會化的新資訊時代。(注:「數據」,也可稱「資料」)
2. 市場規模:根據IDC(國際資料公司)發布《2021年V2全球大數據支出指南》的預測,全球大數據市場的IT投資規模有望在2025年超過3,500億美元,五年預...
目錄
前言
大量資料聚集篇
Ch01 入門:大數據的基本概念
1.1初步認識,大數據究竟是什麼
1.2預測未來,大數據的發展趨勢
1.3做好準備,大數據面對的挑戰
Ch02 價值:大數據商業變革
2.1深度探勘,大數據的商業機遇
2.2展現價值,大數據的4大變革
2.3價值轉型,大數據下的商業智慧
2.4大數據商業變革應用案例
CH03 架構:大數據基礎設施
3.1探索全球,10大大數據部署方案
3.2掘金紅海,10大大數據分析平臺
3.3大數據基礎設施應用案例
CH04 掌握:資料管理與探勘
4.1管理資料,解析開源框架Hadoop
4.2探勘資料,大數據如何去蕪存菁
CH05 管理:用資料洞察一切
5.1不能再等,大數據時代的思維變革
5.2知己知彼,資料分析的演變與現狀
5.3企業管理中的大數據分析應用案例
5.4能源管理中的大數據分析應用案例
CH06 案例:擺脫大數據風險
6.1問題凸顯,大數據存在5大風險
6.2步步小心,大數據專案7大盲點
6.3踏雪無痕,徹底逃離大數據監視
6.4有備無患,做好大數據風險管理
6.5大數據風險管理應用案例
精準行業聚焦篇
CH07 平臺:資訊通訊大數據
7.1資訊通訊平臺大數據解決方案
7.2資訊通訊平臺大數據應用案例
CH08 醫療:資料解決大難題
8.1醫療行業大數據解決方案
8.2醫療行業大數據應用案例
CH09 網路:抓牢資料發源地
9.1網路大數據解決方案
9.2網路大數據應用案例
CH010 零售:打響大數據之戰
10.1零售行業大數據解決方案
10.2零售行業大數據應用案例
CH11 製造:更快更好的生產
11.1生產製造業大數據解決方案
11.2生產製造業大數據應用案例
CH12 餐飲:精準行銷的資料
12.1餐飲行業大數據解決方案
12.2餐飲行業大數據應用案例
CH13 金融:大數據理財時代
13.1金融行業大數據解決方案
13.2金融行業大數據應用案例
CH14 交通:暢通無阻的資料
14.1交通行業大數據解決方案
14.2交通行業大數據應用案例
CH15 社會:用資料改變生活
15.1教育領域大數據應用案例
15.2體育領域大數據應用案例
15.3影音媒體大數據應用案例
15.4生活中的大數據應用案例
前言
大量資料聚集篇
Ch01 入門:大數據的基本概念
1.1初步認識,大數據究竟是什麼
1.2預測未來,大數據的發展趨勢
1.3做好準備,大數據面對的挑戰
Ch02 價值:大數據商業變革
2.1深度探勘,大數據的商業機遇
2.2展現價值,大數據的4大變革
2.3價值轉型,大數據下的商業智慧
2.4大數據商業變革應用案例
CH03 架構:大數據基礎設施
3.1探索全球,10大大數據部署方案
3.2掘金紅海,10大大數據分析平臺
3.3大數據基礎設施應用案例
CH04 掌握:資料管理與探勘
4.1管理資料,解析開源框架Hadoop...
購物須知
退換貨說明:
會員均享有10天的商品猶豫期(含例假日)。若您欲辦理退換貨,請於取得該商品10日內寄回。
辦理退換貨時,請保持商品全新狀態與完整包裝(商品本身、贈品、贈票、附件、內外包裝、保證書、隨貨文件等)一併寄回。若退回商品無法回復原狀者,可能影響退換貨權利之行使或須負擔部分費用。
訂購本商品前請務必詳閱退換貨原則。