大資料技術包括資料收集、資料存取、基礎架構、資料處理、統計分析、資料探勘、模型預測、結果呈現。在大資料的生命週期中,資料採集處於第一個環節。根據MapReduce產生資料的應用系統分類,大資料的採集主要有4種來源:管理資訊系統、Web資訊系統、物理資訊系統、科學實驗系統。
大資料技術包括資料收集、資料存取、基礎架構、資料處理、統計分析、資料探勘、模型預測、結果呈現。在大資料的生命週期中,資料採集處於第一個環節。根據MapReduce產生資料的應用系統分類,大資料的採集主要有4種來源:管理資訊系統、Web資訊系統、物理資訊系統、科學實驗系統。
大資料技術與應用可應用於各行各業,將人們收集到的龐大資料進行分析整理,實現資訊的有效利用。
1、與雲計算的深度結合。大資料離不開雲處理,雲處理為大資料提供了彈性可拓展的基礎裝置,是產生大資料的平臺之一。自2013年開始,大資料技術已開始和雲計算技術緊密結合,預計未來兩者關係將更為密切。除此之外,物聯網、移動網際網路等新興計算形態,也將一齊助力大資料革命,讓大資料營銷發揮出更大的影響力。
2、科學理論的突破。隨著大資料的快速發展,就像計算機和網際網路一樣,大資料很有可能是新一輪的技術革命。大資料的應用可能會改變資料世界裡的很多演算法和基礎理論,實現科學技術上的突破。
1、大資料技術與應用專業一般指大資料技術與應用(高校計算機類專業)。
2、大資料技術與應用研究方向是將大資料分析挖掘與處理、移動開發與架構、軟體開發、雲計算等前沿技術相結合的“網際網路+”前沿科技專業。
3、本專業旨在培養學生系統掌握資料管理及資料探勘方法,成為具備大資料分析處理、資料倉庫管理、大資料平臺綜合部署、大資料平臺應用軟體開發和資料產品的視覺化展現與分析能力的高階專業大資料技術人才。
4、大資料技術被滲透到社會的方方面面,醫療衛生、商業分析、國家安全、食品安全、金融安全等方面。2014年,從大資料作為國家重要的戰略資源和加快實現創新發展的高度,在全社會形成“用資料來說話、用資料來管理、用資料來決策、用資料來創新”的文化氛圍與時代特徵。大資料科學將成為計算機科學、人工智慧技術(虛擬現實、商業機器人、自動駕駛、全能的自然語言處理)、數字經濟及商業、物聯網應用、還有各個人文社科領域發展的核心。