關于學習大數據的體會(二)

BI級別指的是那些對于內存來說太大的數據量，但一般可以將其放入傳統的BI產品和專門設計的BI數據庫之中進行分析。目前主流的BI產品都有支持TB級以上的數據分析方案。種類繁多，就不具體列舉了。

五、大數據的特點。

1、海量性

企業面臨著數據量的大規模增長。例如，IDC最近的報告預測稱，到2020年，全球數據量將擴大50倍。目前，大數據的規模尚是一個不斷變化的指標，單一數據集的規模范圍從幾十TB到數PB不等。簡而言之，存儲1PB數據將需要兩萬臺配備50GB硬盤的個人電腦。此外，各種意想不到的來源都能產生數據。

   上圖是上海雙擊信息科技有限公司的數據，這個是美國進口LED燈的部分數據，它記錄了日期、采購商、供應商、原產國、產品描述、和重量等，這樣的數據是非常龐大的，如果這樣的話數據給到中國出口型企業是沒有用的，所以要進行專業的數據分析，讓數據產生價值。

2、易變性

　　大數據具有多層結構，這意味著大數據會呈現出多變的形式和類型。相較傳統

的業務數據，大數據存在不規則和模糊不清的特性，造成很難甚至無法使用傳統的應用軟件進行分析。傳統業務數據隨時間演變已擁有標準的格式，能夠被標準的商務智能軟件識別。目前，企業面臨的挑戰是處理并從各種形式呈現的復雜數據中挖掘價值。

3、多樣性

　　一個普遍觀點認為，人們使用互聯網搜索是形成數據多樣性的主要原因，這一看法部分正確。然而，數據多樣性的增加主要是由于新型多結構數據，以及包括網絡日志、社交媒體、互聯網搜索、手機通話記錄及傳感器網絡等數據類型造成。其中，部分傳感器安裝在火車、汽車和飛機上，每個傳感器都增加了數據的多樣性。

4、高速性

高速描述的是數據被創建和移動的速度。在高速網絡時代，通過基于實現軟件性能優化的高速電腦處理器和服務器，創建實時數據流已成為流行趨勢。企業不僅需要了解如何快速創建數據，還必須知道如何快速處理、分析并返回給用戶，以滿足他們的實時需求。根據IMS Research關于數據創建速度的調查，據預測，到2020年全球將擁有220億部互聯網連接設備。

六、大數據的影響和發展趨勢。

在數字時代，人們的生活方式和思考方式在發生一系列的變化，這種變化同樣也使得人們的消費觀念發生較大的轉變。大數據時代對生活、工作的影響  大數據，其影響除了經濟方面的，它同時也能在政治、文化等方面產生深遠的影響，大數據可以幫助人們開啟循“數”管理的模式，也是我們當下“大社會”的集中體現，三分技術，七分數據，得數據者得天下。它賦予消費者更廣闊的視野，同時也在提高著消費者的自主意識。這些影響足夠消費者不再完全相信傳統營銷“轟炸式”的傳播和灌輸，他們更加傾向于受到質疑的品牌和產品，他們能夠在基礎上發表自己的觀點，影響到其他的人群。“大數據”的影響，增加了對信息管理專家的需求。事實上，大數據的影響并不僅僅限于信息通信產業，而是正在“吞噬”和重構很多傳統行業，廣泛運用數據分析手段管理和優化運營的公司其實質都是一個數據公司。麥當勞、肯德基以及蘋果公司等旗艦專賣店的位置都是建立在數據分析基礎之上的精準選址。

在零售業中，數據分析的技術與手段更是得到廣泛的應用，傳統企業如沃爾瑪通過數據挖掘重塑并優化供應鏈，新崛起的電商如卓越亞馬遜、淘寶等則通過對海量數據的掌握和分析，為用戶提供更加專業化和個性化的服務。在這種時代環境下，如果企業和廠商對他們的觀點是漠視的態度，那么他們將會失去大量的關注人群，也使得傳統的營銷模式傳播的影響力大打折扣。大數據在個人隱私的方面，大量數據經常含有一些詳細的潛在的能夠展示有關我們的信息，逐漸引起了我們對個人隱私的擔憂。一些處理大數據公司需要認真的對待這個問題。例如美國天睿資訊給人留下比較深刻印象的是他的一個科學家提出，我們不應該簡單地服從法律方面的隱私保護問題，這些遠遠不夠的，公司都應該遵從谷歌不作惡的原則，甚至更應該做出更積極的努力。

1 大數據的趨勢

20年后互聯網發生的巨大的變化，移動互聯、社交網絡、電子商務大大拓展了互聯網的疆界和應用領域。我們在享受便利的同時，也無償貢獻了自己的“行蹤”。在物理世界中，許多行為是“人似秋鴻有來信，事如春夢了無痕”。但在互聯網上卻是“處處行跡處處痕”。任何行為，皆有前兆。要買商品，必先瀏覽，對比，詢價；要搞活動，必先征集、討論、策劃；互聯網上恰恰保留了大量的前兆性的數據，通過對這些數據的收集和分析，互聯網企業具備了預判物理世界中，人類未來行為的能力。收集分析海量的各種類型的數據，并快速獲取影響未來的信息的能力，這就是大數據技術的魅力。事實上大數據的來源非常廣泛，天上的衛星、地上汽車、埋在土壤里面的各類傳感器，無時無刻不在生成大量的數據。這些數據如果綜合利用，產生的社會價值和經濟價值將是難以估量的。

圍繞數據和最終用戶，我們觀察到計算機行業的發展有三大方向：第一應用軟件一定會泛互聯網化。第二，行業會垂直整合。越靠近終端用戶的公司，在產業鏈上將擁有更大的發言權。第三，數據將成為資產。泛互聯網化是收集數據的重要渠道，沒有泛互聯網化的應用軟件，公司就難以獲得用戶的行為數據；行業垂直整合趨勢在數據運用層面，通過搜集大量的用戶數據，更貼近用戶，更理解用戶，為其提供更適當的服務；數據成為資產更強調數據的戰略意義。三大趨勢的提出，拓展大數據主題的研究范圍，開辟了新的視角和邏輯來觀察軟件公司成長路徑和投資價值。成為我們分析研究TMT公司的頂層邏輯的要素之一。

2發展趨勢

趨勢一：成為重要戰略資源。在未來一段時間內，大數據將成為企業、社會和國家層面重要的戰略資源。大數據將不斷成為各類機構，尤其是企業的重要資產，成為提升機構和公司競爭力的有力武器。企業將更加鐘情于用戶數據，充分利用客戶與其在線產品或服務交互產生的數據，并從中獲取價值。此外，在市場影響方面，大數據也將扮演重要角色——影響著廣告、產品推銷和消費者行為。

趨勢二：數據隱私標準將出臺。大數據將面臨隱私保護的重大挑戰，現有的隱私保護法規和技術手段難以適應大數據環境，個人隱私越來越難以保護，有可能會出現有償隱私服務，數據“面罩”將會流行。預計各國都將會有一系列關于數據隱私的標準和條例出臺。

趨勢三：分析方法發生變革。大數據分析將出現一系列重大變革。就像計算機和互聯網一樣，大數據可能是新一波的技術革命。基于大數據的數據挖掘、機器學習和人工智能可能會改變小數據里的很多算法和基礎理論，這方面很可能會產生理論級別的突破。

趨勢四：與云計算深度融合。大數據處理離不開云計算技術，云計算為大數據提供彈性可擴展的基礎設施支撐環境以及數據服務的高效模式，大數據則為云計算提供了新的商業價值，因此，從2013年開始，大數據技術與云計算技術必然進入更完美的結合期。總體而言，云計算、物聯網、移動互聯網等新興計算形態，既是產生大數據的地方，也是需要大數據分析方法的領域。

趨勢五：網絡安全問題凸顯。大數據的安全令人擔憂，大數據的保護越來越重要。大數據的不斷增加，對數據存儲的物理安全性要求會越來越高，從而對數據的多副本與容災機制提出更高的要求。網絡和數字化生活使得犯罪分子更容易獲得關于人的信息，也有了更多不易被追蹤和防范的犯罪手段，可能會出現更高明的騙局。

趨勢六：大數據學科誕生。數據科學將作為一個與大數據相關的新興學科出現。同時，大量的數據科學類專著將出版。

趨勢七：催生數據分析師等職業。大數據將催生一批新的就業崗位，如數據分析師、數據科學家等。具有豐富經驗的數據分析人才成為稀缺資源，數據驅動型工作機會將呈現出爆炸式的增長。

七、結論。

在大數據的時代，在信息爆炸的時代，創造商業價值的源泉來自于社會，以共享為核心，三大運營商都不在把管道作為價值的唯一來源。他們認為除了做管道之外，還要做流量價值。整個時代的應用創新模式，這就要求企業要注重信息的價值，更加重視商業創新，商業模式創新，包括像DOUBLE-CLICK的方式，從傳統的貿易方式包括展會、B2B平臺和貿易情報的創新。商業模式創新的目的是抓住企業用戶需求的痛點，挖掘用戶內心真實的需求。企業要擺脫困境或打破發展瓶頸，實現快速增長，就必須進行商業模式創新。

商業模式創新的靈魂就是文化因素，商業模式創新的目的是為了增強企業的盈利能力，增強企業的抗風險能力，降低企業營運成本和難度，給競爭對手設置門檻，超常規快速發展，這些只是商業企業發展過程中的技術問題。而文化的建設則體現出企業的素質問題。提升企業的自身形象和社會形象。所以從這個角度來說，企業也必須進行商業模式的創新。