大資料發展的四階段?使用者87167595550932022-07-30 17:27:10

1、大資料的發展歷程

2008年被《自然》雜誌專刊提出了BigData概念

萌芽階段:

20世紀90年代到21世紀的樣子,資料庫技術成熟,資料探勘理論成熟,也稱資料探勘階段。

突破階段:

2003——2006年,非結構化的資料大量出現,傳統的資料庫處理難以應對,也稱非結構化資料階段。

成熟階段:

2006——2009年,谷歌公開發表兩篇論文《谷歌檔案系統》和《基於叢集的簡單資料處理:MapReduce》,其核心的技術包括分散式檔案系統GFS,分散式計算系統框架MapReduce,分散式鎖Chubby,及分散式資料庫BigTable,這期間大資料研究的焦點是效能,雲計算,大規模的資料集並行運算演算法,以及開源分散式架構(Hadoop)

應用階段:

2009年至今,大資料基礎技術成熟之後,學術界及及企業界紛紛開始轉向應用研究,2013年大資料技術開始向商業、科技、醫療、政府、教育、經濟、交通、物流及社會的各個領域滲透,因此2013年也被稱為大資料元年。