伴隨著科技的飛速發(fā)展，人工智能逐漸進入日常生活的各個方面。而大數(shù)據(jù)技術的研究和發(fā)展，則更推動技術的革新和社會經(jīng)濟的變革。大數(shù)據(jù)技術的出現(xiàn)背景、發(fā)展歷程、研究現(xiàn)狀以及發(fā)展過程中的存在問題是什么？同時在人工智能領域的大數(shù)據(jù)技術的發(fā)展又有哪些應用場景？讓我們一起去探索。

大數(shù)據(jù)的起源和發(fā)展

隨著互聯(lián)網(wǎng)的廣泛運用，云計算時代已經(jīng)逐漸步入人們的生活，大數(shù)據(jù)在此背景下應運而生。1982年，約翰·奈斯比特在其著作中提出“我們現(xiàn)在大量生產(chǎn)信息，正如過去我們大量生產(chǎn)汽車一樣”；阿爾文·托夫勒在《第三次浪潮》一書中，稱大數(shù)據(jù)為“第三次浪潮的華彩樂章”；面對海量的數(shù)據(jù)，原有的處理方式已無法應對。2011年，麥肯錫全球研究所發(fā)布了《大數(shù)據(jù)：創(chuàng)新、競爭和生產(chǎn)力的下一個前沿》的報告，對“大數(shù)據(jù)”進行清晰解釋；2012年，瑞士達沃斯召開世界經(jīng)濟論壇，大數(shù)據(jù)是會議主題。

大數(shù)據(jù)發(fā)展起始于18世紀80年代初至90年代末，統(tǒng)計學家赫爾曼做出一臺電動設備來統(tǒng)計美國本土人口普查數(shù)據(jù)，揭開數(shù)據(jù)處理新時代。雷德和普賴斯分別在1944年和1961年出版了《學者與研究型圖書館的未來》和《巴比倫以來的科學》，預測大數(shù)據(jù)時代的到來。2001年，美國Cartner公司推出大數(shù)據(jù)模型。2008年，美國自然雜志出版的一期專刊中第一次提出大數(shù)據(jù)——Big Data模型。

大數(shù)據(jù)技術研究現(xiàn)狀

在國外，大數(shù)據(jù)技術被認為源于谷歌，在2003至2006年先后公開發(fā)表關于MapReduce、GFS和BigTable等核心技術學術論文。2012年，美國白宮頒布了《大數(shù)據(jù)研究與發(fā)展計劃》，投入巨資到大數(shù)據(jù)研究領域。美國防部還開展XDATA項目，將大數(shù)據(jù)研究投入軍事領域數(shù)據(jù)分析。在國內(nèi)，2013年被稱為大數(shù)據(jù)元年。2014年，國內(nèi)眾多互聯(lián)網(wǎng)企業(yè)如小米、百度、騰訊、阿里等已將大數(shù)據(jù)技術應用于公司業(yè)務。

大數(shù)據(jù)技術存在問題

大數(shù)據(jù)技術的發(fā)展對各行各業(yè)也有重大影響，同時大數(shù)據(jù)技術的研究目前還不夠完善，也面臨著諸多問題需要去解決。

（1）數(shù)據(jù)分析和處理問題。

傳統(tǒng)數(shù)據(jù)處理方式適用于少量的、結構化數(shù)據(jù)，而生活中采集的大多數(shù)數(shù)據(jù)是非結構化的數(shù)據(jù)，這就對數(shù)據(jù)分析和處理過程產(chǎn)生很大的影響。MapReduce計算并不能解決大數(shù)據(jù)處理的所有問題，需要更深層次的研究，解決數(shù)據(jù)處理的局限性。

（2）數(shù)據(jù)安全和隱私問題。

伴隨著海量數(shù)據(jù)的采集和處理，數(shù)據(jù)的安全和數(shù)據(jù)的隱私問題應運而生。如何能夠保障被采集數(shù)據(jù)的安全性、數(shù)據(jù)本身的隱私保護，都將是今后大數(shù)據(jù)技術研究的重點問題。現(xiàn)今社會就存在許多用戶數(shù)據(jù)信息被盜用或者共享公開化等情況，這樣對用戶的人身和財產(chǎn)安全都產(chǎn)生很大的威脅。

（3）政策和法規(guī)保障問題。

面對大數(shù)據(jù)飛速發(fā)展的今天，國家缺乏相應監(jiān)管體系，致使大數(shù)據(jù)濫用后用戶的個人權益無法得到有效保障，國家應該建立相應的法律體系，對大數(shù)據(jù)的收集、開發(fā)和利用進行嚴格管理，同時對數(shù)據(jù)的正確使用設置規(guī)范和標準，推動大數(shù)據(jù)發(fā)展的規(guī)范化、合法化。

大數(shù)據(jù)技術在人工智能領域的應用

大數(shù)據(jù)技術在人工智能領域的應用廣泛，涉及智慧農(nóng)業(yè)、智慧城市、智慧工業(yè)等諸多方面［。

智慧農(nóng)業(yè)，大數(shù)據(jù)技術結合人工智能技術，收集海量數(shù)據(jù)信息進行處理分析，建立起精準農(nóng)業(yè)、農(nóng)產(chǎn)品流通體系、農(nóng)業(yè)氣象預測、農(nóng)業(yè)環(huán)境管理等多個系統(tǒng)，推動農(nóng)業(yè)的生產(chǎn)。智慧農(nóng)業(yè)的提出使得很多技術可以整合使用，通過對土壤數(shù)據(jù)信息的采集，對土地耕作環(huán)境的監(jiān)控，密切關注著溫度、濕度的變化，并及時反饋監(jiān)測的數(shù)據(jù)信息，預測出今后發(fā)展的方向。

智慧城市，大數(shù)據(jù)技術應用于城市建設，建立城市數(shù)據(jù)信息共享平臺，實時監(jiān)管交通狀況系統(tǒng)、智慧社區(qū)服務平臺、城市地下排水監(jiān)控系統(tǒng)等，推動城市智能化管理。智慧城市的格局要以網(wǎng)絡化覆蓋為基礎，涵蓋公共、衛(wèi)生、交通、社區(qū)服務、社會保障等諸多方面，每一個環(huán)節(jié)都有相應的系統(tǒng)進行建構網(wǎng)絡，然后通過各環(huán)節(jié)的相互配合去建造智慧城市格局。

智慧工業(yè)，大數(shù)據(jù)技術促進工業(yè)“跨尺度、產(chǎn)業(yè)鏈、跨界”多源數(shù)據(jù)融合特點，推動工業(yè)化的智能管理和產(chǎn)量提升。工業(yè)化的進程在大數(shù)據(jù)技術的協(xié)助下，可以有效進行數(shù)據(jù)規(guī)整，對工業(yè)流程數(shù)據(jù)進行密切監(jiān)控，確保產(chǎn)品生產(chǎn)環(huán)節(jié)精確度更高。

當今時代是大數(shù)據(jù)的時代，大數(shù)據(jù)的合理使用將推動生產(chǎn)、生活的方方面面。大數(shù)據(jù)的發(fā)展和革新還在不斷地發(fā)生改變，與此同時對大數(shù)據(jù)處理技術的研究也一直從未間斷。然而，目前大數(shù)據(jù)的研究還處于初級階段，很多技術不夠完善，也存在著諸多問題，面臨著巨大的挑戰(zhàn)。伴隨著智能化時代的來臨，人工智能與大數(shù)據(jù)技術的結合將是今后大數(shù)據(jù)發(fā)展研究的重要主題。

審核編輯 黃昊宇