一、農(nóng)業(yè)大數(shù)據(jù)的內(nèi)涵
農(nóng)業(yè)是產(chǎn)生大數(shù)據(jù)的無盡源泉,也是大數(shù)據(jù)應(yīng)用的廣闊天地。農(nóng)業(yè)數(shù)據(jù)涵蓋面廣、數(shù)據(jù)源復(fù)雜。關(guān)于農(nóng)業(yè)大數(shù)據(jù),顧名思義,就是運用大數(shù)據(jù)理念、技術(shù)和方法,解決農(nóng)業(yè)或涉農(nóng)領(lǐng)域數(shù)據(jù)的采集、存儲、計算與應(yīng)用等一系列問題,是大數(shù)據(jù)理論和技術(shù)在農(nóng)業(yè)上的應(yīng)用和實踐。農(nóng)業(yè)大數(shù)據(jù)是大數(shù)據(jù)理論和技術(shù)的專業(yè)化應(yīng)用,除了具備大數(shù)據(jù)的公共屬性,必然具有農(nóng)業(yè)數(shù)據(jù)自身的特點。通常所講到的農(nóng)業(yè),實際上應(yīng)涵蓋農(nóng)村、農(nóng)業(yè)和農(nóng)民三個層面,具有涵蓋區(qū)域廣、涉及領(lǐng)域和內(nèi)容寬泛、影響因素眾多、數(shù)據(jù)采集復(fù)雜、決策管理困難等特點。狹義的農(nóng)業(yè)生產(chǎn)是指種植業(yè),包括生產(chǎn)糧食作物、經(jīng)濟作物、飼料作物和綠肥等農(nóng)作物的生產(chǎn)活動等,不僅僅涉及到耕地、播種、施肥、殺蟲、收割、存儲、育種等作物生產(chǎn)的全過程各環(huán)節(jié),而且還涉及跨行業(yè)、跨專業(yè)、跨業(yè)務(wù)的數(shù)據(jù)分析與挖掘,以及結(jié)果的展示與應(yīng)用,乃至整個產(chǎn)業(yè)鏈的資源、環(huán)境、過程、安全等監(jiān)控與決策管理等。廣義的農(nóng)業(yè)生產(chǎn)是指包括種植業(yè)、林業(yè)、畜牧業(yè)、漁業(yè)和副業(yè)五種產(chǎn)業(yè)形式,均應(yīng)該包含在農(nóng)業(yè)大數(shù)據(jù)研究的范疇中。
隨著精準農(nóng)業(yè)、智慧農(nóng)業(yè)、物聯(lián)網(wǎng)和云計算的快速發(fā)展要求,農(nóng)業(yè)數(shù)據(jù)也呈現(xiàn)出爆炸式的增加,數(shù)據(jù)從存儲到挖掘應(yīng)用都面臨巨大挑戰(zhàn)。物聯(lián)網(wǎng)在農(nóng)業(yè)各領(lǐng)域的滲透已經(jīng)成為農(nóng)業(yè)信息技術(shù)發(fā)展的必然趨勢,也必將成為農(nóng)業(yè)大數(shù)據(jù)最重要的數(shù)據(jù)源。大量的農(nóng)業(yè)工作者和管理者,既是大數(shù)據(jù)的使用者,也是大數(shù)據(jù)的制造者。由于農(nóng)業(yè)自身的復(fù)雜性和特殊性,農(nóng)業(yè)數(shù)據(jù)必將從基于結(jié)構(gòu)化的關(guān)系型數(shù)據(jù)類型,向半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)類型轉(zhuǎn)變。相對于采用二維表來邏輯表達的關(guān)系型數(shù)據(jù)結(jié)構(gòu),農(nóng)業(yè)領(lǐng)域更多的是非結(jié)構(gòu)化的數(shù)據(jù),如大量的文字、圖表、圖片、動畫、語音/視頻等形式的超媒體要素,以及專家經(jīng)驗和知識、農(nóng)業(yè)模型等。大量事實已經(jīng)證明,非結(jié)構(gòu)化數(shù)據(jù)呈現(xiàn)出快速增長的勢頭,其數(shù)量已大大超過結(jié)構(gòu)化數(shù)據(jù)。尤其是農(nóng)業(yè)生產(chǎn)過程的主體是生物,易受外界環(huán)境和人的管理等因素影響,存在多樣性和變異性、個體與群體差異性等,都決定了對數(shù)據(jù)的采集、挖掘與分析應(yīng)用的難度。如何挖掘數(shù)據(jù)價值、提高數(shù)據(jù)分析應(yīng)用能力、減少數(shù)據(jù)冗余和數(shù)據(jù)垃圾,是農(nóng)業(yè)大數(shù)據(jù)面臨的重要課題。
二、農(nóng)業(yè)大數(shù)據(jù)的主要應(yīng)用
基于目前農(nóng)業(yè)信息技術(shù)主要應(yīng)用領(lǐng)域和產(chǎn)生大數(shù)據(jù)的主要來源分析,大數(shù)據(jù)的主要應(yīng)用領(lǐng)域包括以下幾個方面:
①生產(chǎn)過程管理數(shù)據(jù): 設(shè)施種植業(yè)、設(shè)施養(yǎng)殖業(yè)( 畜禽和水產(chǎn)等) 、精準農(nóng)業(yè)等。提高整個生產(chǎn)過程的精準化監(jiān)測、智能化決策、科學(xué)化管理和調(diào)控,是農(nóng)業(yè)信息化的緊迫任務(wù)。
②農(nóng)業(yè)資源管理數(shù)據(jù):土地資源、水資源、農(nóng)業(yè)生物資源、生產(chǎn)資料等。我國農(nóng)業(yè)資源緊缺、生態(tài)環(huán)境與生物多樣性退化,要在摸清家底的基礎(chǔ)上,進一步優(yōu)化配置、合理開發(fā),實現(xiàn)農(nóng)業(yè)高產(chǎn)優(yōu)質(zhì)、節(jié)能高效的可持續(xù)發(fā)展。
③農(nóng)業(yè)生態(tài)環(huán)境管理數(shù)據(jù): 土壤、大氣、水質(zhì)、氣象、污染、災(zāi)害等。需要進行全面監(jiān)測、精準管理。
④農(nóng)產(chǎn)品與食品安全管理大數(shù)據(jù):產(chǎn)地環(huán)境、產(chǎn)業(yè)鏈管理、產(chǎn)前產(chǎn)中產(chǎn)后、儲藏加工、市場流通領(lǐng)域、物流、供應(yīng)鏈與溯源系統(tǒng)等。
⑤農(nóng)業(yè)裝備與設(shè)施監(jiān)控大數(shù)據(jù): 設(shè)備和實施工況監(jiān)控、遠程診斷、服務(wù)調(diào)度等。
在上述應(yīng)用中,關(guān)鍵是農(nóng)業(yè)環(huán)境與資源、農(nóng)業(yè)生產(chǎn)過程、農(nóng)業(yè)產(chǎn)品安全、農(nóng)業(yè)市場和消費的監(jiān)測和預(yù)測等。
⑥各種科研活動產(chǎn)生的大數(shù)據(jù),如大量的遙感數(shù)據(jù),包括空間與地面數(shù)據(jù); 大量的生物實驗數(shù)據(jù),如基因圖譜、大規(guī)模測序、農(nóng)業(yè)基因組數(shù)據(jù)、大分子與藥物設(shè)計等。
三、農(nóng)業(yè)大數(shù)據(jù)的主要任務(wù)
基于大數(shù)據(jù)的理論和技術(shù),不斷推進農(nóng)業(yè)大數(shù)據(jù)技術(shù)的創(chuàng)新與應(yīng)用實踐,結(jié)合國家農(nóng)業(yè)現(xiàn)代化和農(nóng)業(yè)信息化發(fā)展戰(zhàn)略,突破農(nóng)業(yè)大數(shù)據(jù)的一些關(guān)鍵技術(shù),謀劃和凝練一批農(nóng)業(yè)大數(shù)據(jù)的示范和應(yīng)用項目,將大數(shù)據(jù)提升到與物聯(lián)網(wǎng)和云計算同等重要的地位,搶占大數(shù)據(jù)這一新時代信息化技術(shù)制高點,推進智慧農(nóng)業(yè)不斷發(fā)展。
在市場經(jīng)濟條件下,農(nóng)業(yè)的分散經(jīng)營和生產(chǎn)模式,使得在參與市場競爭中對信息的依賴性比任何時候都更加重要: 信息和服務(wù)的滯后性,往往對整個產(chǎn)業(yè)鏈產(chǎn)生巨大的負面影響。由于市場經(jīng)濟的特點,農(nóng)業(yè)生產(chǎn)很難在全國范圍內(nèi)形成統(tǒng)一規(guī)劃,致使農(nóng)業(yè)生產(chǎn)受市場波動影響頗大,而且農(nóng)業(yè)生產(chǎn)很多方面是依靠感覺和經(jīng)驗,缺少量化的數(shù)據(jù)支撐。大數(shù)據(jù)時代,不僅可以通過建立綜合的數(shù)據(jù)平臺,調(diào)控農(nóng)業(yè)生產(chǎn),還可以記錄分析農(nóng)業(yè)種養(yǎng)過程、流通過程中的動態(tài)變化,通過分析數(shù)據(jù),制定一系列調(diào)控和管理措施,使農(nóng)業(yè)高效有序發(fā)展。
1、優(yōu)化整合農(nóng)業(yè)數(shù)據(jù)資源
我國農(nóng)業(yè)信息技術(shù)在經(jīng)歷了多年的發(fā)展,研發(fā)了涵蓋多層面、多領(lǐng)域的農(nóng)業(yè)信息化系統(tǒng),構(gòu)建了很多不同級別、面向不同領(lǐng)域的數(shù)據(jù)資源,形成了龐大的信息資源財富。我國大量的涉農(nóng)網(wǎng)站,匯集了很多信息資源。但由于體制和利益等原因,這些數(shù)據(jù)相互之間缺乏統(tǒng)一標準和規(guī)范,在功能上不能關(guān)聯(lián)互補、信息不能共享互換、信息與業(yè)務(wù)流程和應(yīng)用相互脫節(jié),形成了所謂的信息孤島。數(shù)據(jù)缺乏標準、難以共享,必然導(dǎo)致低水平重復(fù)建設(shè)、數(shù)據(jù)利用率低、信息資源凌亂分散和大量冗余等。基于云計算構(gòu)架和大數(shù)據(jù)技術(shù),整合數(shù)據(jù)資源、規(guī)范數(shù)據(jù)標準、統(tǒng)一標識和規(guī)范協(xié)議等,實現(xiàn)計算資源虛擬化建設(shè),是消除數(shù)據(jù)鴻溝、發(fā)展農(nóng)業(yè)大數(shù)據(jù)資源的關(guān)鍵所在,否則就構(gòu)不成大數(shù)據(jù),就會成為無水之源、無本之木,造成巧婦難為無米之炊的困境。通過構(gòu)造虛擬化技術(shù)平臺,實現(xiàn) IT 資源的邏輯抽象和統(tǒng)一表示,將在大規(guī)模數(shù)據(jù)中心管理和解決方案交付方面發(fā)揮巨大的作用,是支撐云存儲和云計算系統(tǒng)的基石。
2、農(nóng)業(yè)大數(shù)據(jù)平臺建設(shè)
為了不斷推進農(nóng)業(yè)經(jīng)濟的優(yōu)化,實現(xiàn)可持續(xù)的產(chǎn)業(yè)發(fā)展和區(qū)域產(chǎn)業(yè)結(jié)構(gòu)優(yōu)化調(diào)整,進一步推動智慧農(nóng)業(yè)發(fā)展進程,需要全面及時掌握農(nóng)業(yè)的發(fā)展動態(tài),這需要依托農(nóng)業(yè)大數(shù)據(jù)及相關(guān)大數(shù)據(jù)分析處理技術(shù),建設(shè)一個農(nóng)業(yè)大數(shù)據(jù)分析應(yīng)用平臺。在技術(shù)上,該平臺應(yīng)該基于先進的大數(shù)據(jù)系統(tǒng)框架,充分融合物聯(lián)網(wǎng)在數(shù)據(jù)獲取以及云計算在數(shù)據(jù)處理方面的技術(shù)優(yōu)勢,建設(shè)具有高效性、先進性和開放性的業(yè)務(wù)化應(yīng)用平臺,例如探索構(gòu)建基于 Hadoop + Map-Reduce 平臺。結(jié)構(gòu)上,該平臺應(yīng)具有良好的可配置性,滿足資源擴展、業(yè)務(wù)流程的變化。平臺應(yīng)具有穩(wěn)健的設(shè)計構(gòu)架、良好的人機交互功能,便于一般技術(shù)人員開發(fā)使用。隨著應(yīng)用領(lǐng)域的拓寬、業(yè)務(wù)的發(fā)展、業(yè)務(wù)量的增加,系統(tǒng)也應(yīng)該具有良好的擴展性和應(yīng)用性。
平臺建設(shè):①針對所選擇的優(yōu)先發(fā)展領(lǐng)域,如智能農(nóng)情( 苗情、墑情、災(zāi)情、病蟲情) 監(jiān)測、智能設(shè)施農(nóng)業(yè)( 種植業(yè)和養(yǎng)殖業(yè)) 等,基于農(nóng)業(yè)大數(shù)據(jù)相關(guān)技術(shù),構(gòu)建包括數(shù)據(jù)采集技術(shù)、存儲技術(shù)、處理技術(shù)、分析挖掘技術(shù)、展現(xiàn)技術(shù)等一體化應(yīng)用平臺; ②基于大數(shù)據(jù)技術(shù),研發(fā)智能化的決策支持系統(tǒng),可提供大數(shù)據(jù)分析成果發(fā)布,決策管理信息發(fā)布,不僅可為科研院所、各級政府、涉農(nóng)企業(yè)、社會公眾等提供公共的業(yè)務(wù)服務(wù),也可提供個性化的服務(wù)功能。
系統(tǒng)技術(shù)和功能:①通過規(guī)范數(shù)據(jù)接口和協(xié)議,實現(xiàn)各類相關(guān)數(shù)據(jù)庫的交互訪問; ②提供數(shù)據(jù)分析應(yīng)用的算法庫、模型庫、知識庫; ③能滿足農(nóng)業(yè)大數(shù)據(jù)研究的專業(yè)化和個性化需求,在數(shù)據(jù)采集、分析、發(fā)布等方面提供技術(shù)和方法支持; ④數(shù)據(jù)的瀏覽,對數(shù)據(jù)進行查詢、展現(xiàn)和基礎(chǔ)統(tǒng)計分析等初步應(yīng)用; ⑤提供云存儲和服務(wù)的功能等。
通過專業(yè)化處理,對海量數(shù)據(jù)快速“提純”并獲得有價值的信息,最終為政府、企業(yè)乃至各種類型單位的決策和發(fā)展提供支持。
中國鄉(xiāng)村發(fā)現(xiàn)網(wǎng)轉(zhuǎn)自:新三農(nóng)研究(頭條號)
(掃一掃,更多精彩內(nèi)容!)