1、國內農業信息數據體系綜述
農產品價格監管與預警體系的建設,離不開對現有農業信息資源基礎的整合,對中國農產品市場信息基礎體系的調研和分析是本課題的一個重要方面。
按照農業市場信息數據來源的機構是政府及相關單位、私營機構,可以將信息數據分為公共信息數據和商業信息數據,公共信息數據屬于公共產品,一般免費向公眾提供,而商業信息數據則由市場化的專業公司提供,一般需要購買才能獲得。
按照農業市場信息數據所對應的農產品和服務,可以將農業信息數據劃分為不同的產業體系數據。根據農業部對現有農產品產業體系的規劃,從2007年以來,我國陸續開展了50個現代農業產業技術體系,涉及34個作物產品、11個畜產品、5個水產品,那么農業信息數據可以細分為水稻產業數據體系、玉米產業數據體系、小麥產業數據體系、大豆產業數據體系、油菜產業數據體系、棉花產業數據體系、柑橘產業數據體系、蘋果產業數據體系、生豬產業數據體系、奶牛產業數據體系、蔬菜產業數據體系等。
而從對現有農業數據體系的深入調研來看,我國農產品市場信息體系的幾個重要的特征簡摘如下:
A)缺乏頂層標準,公共信息數據開放性不足,數據開放共享體系待完善;
數據開放性主要是針對作為公共產品的農業公共信息數據而言,除了部分數據的涉及國家安全及為政策效果考慮,大部分信息數據理論上是可獲取的,然而從實際效果而言,數據獲取的渠道不暢,獲取成本高昂。農業部下屬事業單位中國農業科學院在構建的國家農業數據共享體系方面做出了嘗試,實際運作的效果不理想。究其原因,則是相關部門只注重部門利益,將本應免費發布的數據,多以紙質年鑒的形式對外發售,而不是采用類似美國農業部的近乎免費的電子數字信息渠道,大大增加獲取信息數據的難度和成本。近兩年來,隨著大數據戰略越來越重要,數據開放共享,以促進大數據產業的發展的呼聲越來越強,中國政府2015年8月31日發布《促進大數據發展行動綱要》中,明確規定要大力推動政府部門數據共享、穩步推動公共數據資源開放。可以預見,在未來的3-5年內,農業公共信息數據的開放性將得到極大提高,數據獲取的成本大幅降低。
B)、農業信息數據資源爆炸性增長,對信息數據管理未到位;
隨著農業投資的不斷增加,互聯網和計算機技術的普及,和其他領域的信息數據資源一樣,農業信息數據資源的數量爆炸性增長,尤其是生物信息數據呈指數式增長,但是我國農業信息數據發展的時間短,相關部門的數據管理經驗不足,在基礎設施和思想準備方面,對農業信息數據的增長準備不足,使得對農業信息數據的管理相對落后,在一定程度上制約了農業信息數據的健康、快速發展。
C)、農業信息數據資源生產仍以政府為主體,私營機構發展迅猛;
我國農業信息數據資源,從2000年以前基本上是以政府數據體系為主,2000年后,隨著農業投資的不斷增加,私營的農業生物科技公司、農業信息咨詢機構等農業信息資源生產主體迅猛發展,特別是在農業經濟類信息數據資源方面,在數據的及時性、數據報表及可視化以及數據挖掘等方面對整個農業信息數據體系進行了很好的補充。未來,以政府為主體,或者以政府購買私營機構的信息數據資源服務為主,激活信息數據資源生產市場。農業部市場與經濟信息司副司長王小兵近日表示,未來要培育多種主體,充分利用好電商平臺大數據,調節農產品生產和消費,構建農業大數據體系。
D)、農業信息數據時效性較差,深度挖掘及利用不足
隨著對農業投資越來越重視,特別是農業金融市場的不斷發展,對農業信息數據的需求越來越大,使得我國現有的農業信息數據的時效性大大提高,但是相比與美國、加拿大等國家的數據發布的時效性來看,我國仍有很大差距,以美國農業部的供需數據為例,數據的發布精確到分秒,數據的統計標準完善,時序較長,數據發布后對全球大宗產品市場供需關系會產生重大影響,對天氣、生長狀況、價格、產銷及其他相關數據對于金融市場和政府決策會產生可預期的影響。而我國的農業社會經濟信息數據發布仍不及時,數據發布審核的過程繁瑣冗長,時序性較短,統計標準不斷轉換,使得在數據挖掘及建模過程中的,可利用的有效數據不足。
E)、農業信息數據統計標準的科學性及信息數據質量有待提高
農業信息數據的質量,除了受限于現有的科研認知水平、經濟條件,還受人員素質、各種制度安排等方面因素的影響。由于我國農業信息數據發展時間短,外加在初期在對農業信息數據的重要性認識不足,在整個標準設計方面,缺少科學性、長期性的規劃,外加人員素質參差不齊,使得某些方面的農業信息數據資源質量較差,需要在行政制度、統計制度和方法等方面不斷完善。
2、國內農產品各類信源數據特征及參考價值評估
對信息數據評價主要采取以下四個特征指標:及時性、真實性、準確性、完整性[1]。
在政府信息數據方面,由于政府結構在人力、智力和財力方面的巨大優勢,以及較為完善和科學的信息數據生產和加工制度和方法,使得政府信息數據在數據完整性、真實性和準確性方面都領先于商業信息數據,但是在數據的及時性方面相比于商業信息數據則有所不足。
鑒于信息數據在政策產生、執行和檢驗的過程中起著重要作用,那么政府部門為達到相關政策效果或者推行某項政策,還包括在科研活動中,存在篡改數據或者故意修改數據指標的行為,這種現象無論在國內還是國外都在一定范圍內存在。
而對商業性信息數據而言,雖然在數據的完整性方面與政府信息數據存在很大差距,但是無論自然資源環境信息數據、生物信息數據還是社會經濟信息數據方面,數據的及時性、準確性是這些商業性數據公司得以存活的主要原因,因此在人力和物力資源相對不占優的情況下,通過市場和私營機構的效率,在及時性方面能夠領先于政府信息數據,在真實性和準確性方面也能夠達到較高的分數。
從具體公共農產品市場信息機構來看:
農業部作為農業市場信息數據體系的主體機構和主管機構,自身基本擁有政策信息數據、集貿市場價格數據、47種重點農產品批發市場價格和交易量數據、全國數千個樣本點的農產品生產信息數據等,信息數據的完整性、真實性和準確性很高,隨著信息發布制度的逐步完善,信息發布的及時性也大大提高。
科研院所方面,主要產出的是農產品市場科研信息及數據,這類信息數據的時效性不大,完整性方面表現也較差,但是在準確性和真實性方面表現優秀,特別是在信息數據的挖掘應用方面,主要應用場景為政府決策服務,也有部分研究成果和數據為市場交易和決策服務。
海關總署發布有所有農產品的進出口貿易數據,數據的及時性、準確性、真實性、完整性非常高。
國家統計局側重于生產信息和價格信息,生產信息中包括產量信息、生成成本收益信息,部分信息來源與農業部有交叉,價格信息方面偏重于生產者價格,形式上偏重于價格指數,使得價格數據在準確性和完整性方面很好。此外,在市場價格方面,除了吸收農業部等其他機構數據,統計局還和其他咨詢機構合作,將部分機構數據整合統計局對重點農產品的監測中去,定期對外進行發布,提高了統計局數據的完整性,隨著統計信息發布制度的逐漸完善,發布的及時性大大提高,統計發布日歷,可以讓受眾掌握該數據發布的日期和時點,對信息數據的預期作用會大大提高。
氣象局發布的是農業氣象市場信息數據,該數據包括降水、溫度、光照、輻射、風速等氣象指標,對于農產品產量、質量的預測以及貿易流通等都有重要的影響,由于廣布的氣象站點及完善的信息發布制度,這類數據在及時性、準確性、真實性和完整性方面都很高。
商務部主要是農產品批發市場價格數據,所采集數據源與農業部有交叉重疊,同時還要國外的農產品市場信息數據,及時性、準確性和真實性方面表現較好,但完整性的表現要遜色一些。
期貨交易所發布的是大宗農產品的期貨市場的交易數據,期貨交易所涉及鄭州商品交易所和大連商品交易所,涉及農產品有稻谷、小麥和玉米燈谷物類,也有豆油、菜油和棕櫚油等油脂類,豆粕、菜粕等飼料原料及棉花和白糖軟商品,交易數據包括開盤價、最高價、最低價、收盤價、結算價、交易量和持倉量等交易信息數據,在數據及時性、準確性和真實性方面表現非常好。完整性方面似乎還有一定發展空間,尤其是對于畜產品的覆蓋。
大宗商品交易中心是除了包括期貨交易市場商品,還包括未在期貨市場交易的其他農產品品種,大宗商品交易中心既有電子盤交易,也有現貨市場電子盤交易,具體的信息數據類型與期貨交易類似,雖然在完整性方面對期貨交易所進行了很大的補充,但是數據的準確性和真實性方面要弱于交易所數據。
證券交易所生產和發布的農產品信息主要是涉農企業的股票市場交易數據,與期貨交易產生的數據類似,在及時性方面表現較差,但是由于我國股市交易制度等方面的缺陷,交易數據的準確性、真實性常受到質疑,且數據只涵蓋上市公司,對企業層次的信息來說,完整性略有不足。
各類農業相關的行業協會通常在組織協調本類會員企業的過程中,會積累較多本行業的數據信息,與上述各類數據比起來,行業協會的數據真實性較高,且數據層級偏向微觀,有大量產地級甚至企業級的數據信息,參考較之很高,但由于缺乏統一的標準和規劃,數據信息的持續性并不算好。
從具體商業性農場品市場信息機構來看:
農業信息數據咨詢公司提供的是農產品市場及時性資訊消息、產品市場行情及政策的深度分析、整合的公共機構信息數據及獨家監測的農產品市場運行數據,包括農產品的階段性生產情況(周度、月度、年度等)、庫存、價格、交易量等,在及時性方面表現非常優秀,準確性和真實性方面,由于缺少相關行業制度,全憑企業自律,但是部分農業信息咨詢機構在市場的檢驗中成長,在市場競爭的壓力下不斷改進,數據的真實性也比較高,但是由于企業自身經濟實力的局限,數據的完整性較差。
農產品電商平臺所生產的信息數據是農產品的交易價格、交易量、庫存、貿易流向、消費人群、消費區域等諸多信息。農產品電商平臺,既包括京東商城和天貓商城等綜合性電商平臺,也包括我買網、天天果園、農牧人等純農業電商平臺。單一電商平臺有產品數量的局限,但是就整個農產品電商平臺而言,基本覆蓋所有農產品,及時性、準確性和真實性方面表現較好。
涉農門戶新聞信息網站主要提供的是零散的大量的農產市場信息數據,及時性方面表現優秀,但在真實性、準確性和完整性方面表現較差。
單個的批發市場及其他個體信息生產者,作為整個市場信息生產的最基礎單元,在及時性、真實性和準確性方面表現較好,單一信息生產者完整性較差。
3、國內農產品各類信源數據的可獲得性評估
信息數據的可獲得性主要強調的是信息數據的開放性,這主要關注的是公共農產品市場信息機構,商業性農場品市場信息機構基本上是對所有人開放,只是這種可獲得性可能帶有不同程度的獲取成本。而公共農產品市場信息機構在某些數據方面,是不對外開放的,只是決策機構可以獲得。
持續納入監測體系的成本評估包括獲取數據的直接成本和維護的間接成本。前提是信息數據來源能夠持續提供信息數據,除了指標沿用具有可持續性外,信息生產機構,特別商業性機構,市場化運作難免會有興衰存亡。直接成本指的是信息數據來源是否是免費的還是付費的,維護的間接成本則包括人力成本及其他物質成本,這取決于信息數據的數量和質量,同時與信息數據的發布方式及挖掘分析深度等密切相關。
從公共農產品市場信息機構來看:
農業部信息參考價值非常高,但整體開放性一般,對于已經開放的信息數據持續監測的成本很低。
科研院所方面,農產品市場科研信息及數據參考價值一般,數據開放性較差,一般只為決策機構服務,持續監測成本非常高。
海關總署發布有所有農產品的進出口貿易數據,數據的參考價值非常高,特別是對于大豆等進口量比較大的農產品,數據的開放性很好,但是海關數據并非全部免費,涉及到較為詳細的企業層面進口數據,基本是收費的,而且費用較高。
國家統計局數據基本都是免費的,但是由于部分重要數據發布較延遲,使得數據參考價值大打折扣,但總體參考價值仍較高,開放性非常好,隨著統計資料得電子化,數據獲取成本大大下降。
氣象局發布的是農業氣象市場信息數據,參考價值較高,特別是對于農作物品種。基本的信息數據在相關網站都可以獲取,開放性較好。但是涉及到詳細、長序列的氣象數據則需要購買,持續監測的成本較高。
商務部主要是農產品批發市場價格數據,參考價值一般,數據開放性很好,數據獲取成本低。
期貨交易所發布的是大宗農產品的期貨市場的交易數據,對于農產品市場參考價值非常大,主要是由于農產品生產和消費的特點,農產品期現貨結合越來越密切,對期貨交易數據的需求越來越大。由于制度要求數據開放,數據的開放性非常好,而且電子化的數據,數據獲取的成本非常低。
大宗商品交易中心數據參考價值較高,數據開放性較好,相較于期貨交易數據,部分數據需購買,獲 取成本較低。
證券交易所生產和發布的農產品信息主要是涉農企業的股票市場交易數據,數據的參考價值較高,數據的開放性較好,獲取的成本較低。
從商業性農場品市場信息機構來看:
農業信息數據商業公司所提供的信息數據,由于具有較強的針對性和操作性,參考價值很高。除了部分面對特定客戶對象的數據產品,開放性很好,但是信息數據獲取的成本非常高。
農產品電商平臺信息數據參考價值較好,但是開放性一般,部分交易數據屬于公司的內部消息,不便對外發布,整體獲取的成本較高。
涉農門戶新聞信息網站所提供的農產品市場信息數據,參考價值一般,開放性非常好,獲取成本較低。
單個的批發市場及其他個體生產者的農產品市場信息數據,參考價值和數據開放性一般,獲取成本較高。
注:
及時性是指農業信息數據的發布在合理的時間范圍內,按時發布。主要是不同頻度的數據,及時同步顯示的、分、時、天、周、旬、月、季、半年、年、一個活動周期等,在合理允許的收集、統計核算、修正的時間后,能夠在約定的時間發布,使得受眾能夠在極短時間內對數據進行可視化及挖掘分析,以供決策使用。
真實性是指農業信息數據的生產者必須具備一定的數理統計及相關專業知識,本著實事求是的原則,嚴格遵守相關工作規范、標準,忠實于實驗,忠實于調研,不弄虛作假,刪改和編造信息數據。
準確性:準確性與真實性緊密相關,真實性是準確性的基礎,但是真實的數據不一定準確。準確性則更多的與數據指標設計的科學性和代表性、實驗設計的科學性和代表性,制度不完善,具體表現為數據指標設計存在明顯的邏輯錯誤,數據拼湊,統一指標在不同時期的統計范圍、口徑、內容、方法、單位及數值上有差別造成數據的不可比性。
完整性:指的是數據覆蓋范圍,主要是品種、數據屬性、空間和時間等,就是要盡可能地覆蓋所有品種、區域與時間范圍,基礎數據的完整性,將在很大程度上影響數據挖掘及決策的結果。
作者單位:布瑞克咨詢
中國鄉村發現網轉自:今日頭條
(掃一掃,更多精彩內容!)