大資料(big data,mega data),或稱巨量資料,指的是需要新處理模式才能具有更強的決策力、洞察力和流程優化能力的海量、高增長率和多樣化的資訊資產。那麼大資料有哪些意義?可以應用到哪些領域,下面給您詳細解答
方法/步驟
1.變革價值的力量
未來十年,決定中國是不是有大智慧的核心意義標準(那個”思想者”),就是國民幸福。一體現到民生上,通過大資料讓事情變得澄明,看我們在人與人關係上,做得是否比以前更有意義;二體現在生態上,看我們在天與人關係上,做得是否比以前更有意義。總之,讓我們從前10年的意義混沌時代,進入未來10年意義澄明時代。
2.變革經濟的力量
生產者是有價值的,消費者是價值的意義所在。有意義的才有價值,消費者不認同的,就賣不出去,就實現不了價值;只有消費者認同的,才賣得出去,才實現得了價值。大資料幫助我們從消費者這個源頭識別意義,從而幫助生產者實現價值。這就是啟動內需的原理。
3.變革組織的力量
隨著具有語義網特徵的資料基礎設施和資料資源發展起來,組織的變革就越來越顯得不可避免。大資料將推動網路結構產生無組織的組織力量。最先反映這種結構特點的,是各種各樣去中心化的WEB2.0應用,如RSS、維基、部落格等。 大資料之所以成為時代變革力量,在於它通過追隨意義而獲得智慧。
大資料的用途
大資料可分成大資料技術、大資料工程、大資料科學和大資料應用等領域。目前人們談論最多的是大資料技術和大資料應用。工程和科學問題尚未被重視。大資料工程指大資料的規劃建設運營管理的系統工程;大資料科學關注大資料網路發展和運營過程中發現和驗證大資料的規律及其與自然和社會活動之間的關係。
物聯網、雲端計算、移動網際網路、車聯網、手機、平板電腦、PC以及遍佈地球各個角落的各種各樣的感測器,無一不是資料來源或者承載的方式。
有些例子包括網路日誌,RFID,感測器網路,社會網路,社會資料(由於資料革命的社會),網際網路文字和檔案;網際網路搜尋索引;呼叫詳細記錄,天文學,大氣科學,基因組學,生物地球化學,生物,和其他複雜和/或跨學科的科研,軍事偵察,醫療記錄;攝影檔案館視訊檔案;和大規模的電子商務 。
大資料概念的結構
大資料就是網際網路發展到現今階段的一種表象或特徵而已,沒有必要神話它或對它保持敬畏之心,在以雲端計算為代表的技術創新大幕的襯托下,這些原本很難收集和使用的資料開始容易被利用起來了,通過各行各業的不斷創新,大資料會逐步為人類創造更多的價值。
其次,想要系統的認知大資料,必須要全面而細緻的分解它,我著手從三個層面來展開:
第一層面是理論,理論是認知的必經途徑,也是被廣泛認同和傳播的基線。在這裡從大資料的特徵定義理解行業對大資料的整體描繪和定性;從對大資料價值的探討來深入解析大資料的珍貴所在;洞悉大資料的發展趨勢;從大資料隱私這個特別而重要的視角審視人和資料之間的長久博弈。
第二層面是技術,技術是大資料價值體現的手段和前進的基石。在這裡分別從雲端計算、分散式處理技術、儲存技術和感知技術的發展來說明大資料從採集、處理、儲存到形成結果的整個過程。
第三層面是實踐,實踐是大資料的最終價值體現。在這裡分別從網際網路的大資料,政府的大資料,企業的大資料和個人的大資料四個方面來描繪大資料已經展現的美好景象及即將實現的藍圖。
大資料需要特殊的技術,以有效地處理大量的容忍經過時間內的資料。適用於大資料的技術,包括大規模並行處理(MPP)資料庫、資料探勘電網、分散式檔案系統、分散式資料庫、雲端計算平臺、網際網路和可擴充套件的儲存系統。
大資料的特點。資料量大、資料種類多、 要求實時性強、資料所蘊藏的價值大。在各行各業均存在大資料,但是眾多的資訊和諮詢是紛繁複雜的,我們需要搜尋、處理、分析、歸納、總結其深層次的規律。
大資料的弊端
雖然大資料的擁護者看到了使用大資料的巨大潛力,但也有隱私倡導者擔心,因為越來越多的人開始收集相關資料,無論是他們是否會故意透露這些資料或通過社交媒體張貼,甚至他們在不知不覺中通過分享自己的生活而公佈了一些具體的數字細節。
分析這些巨大的資料集會使我們的預測能力產生虛假的資訊,將導致作出許多重大和有害的錯誤決定。此外,資料被強大的人或機構濫用,自私的操縱議程達到他們想要的結果。