5月26日,由中國科學院計算機網絡信息中心(以下簡稱“中心”)大數(shù)據(jù)部團隊研發(fā)的“大數(shù)據(jù)流水線系統(tǒng)PiFlow”和“遙感大數(shù)據(jù)平臺GeoBox”分別榮獲2021年度中國國際大數(shù)據(jù)產業(yè)博覽會(以下簡稱“數(shù)博會”)領先科技成果新技術獎和新產品獎。
作為全球首個大數(shù)據(jù)主題的國際級博覽會,數(shù)博會已成為全球大數(shù)據(jù)發(fā)展的風向標和業(yè)界最具國際性、權威性的成果交流平臺。本界數(shù)博會圍繞時代最前沿、最專業(yè)、最具顛覆性的技術熱點,舉辦領先科技成果獎評選活動,申報項目560多項,共49項獲獎。
PiFlow是由中心團隊自主研發(fā)的大數(shù)據(jù)流水線處理與調度系統(tǒng),該系統(tǒng)基于分布式計算框架技術,將大數(shù)據(jù)采集、清洗、存儲與分析進行抽象,組件化開發(fā),完成以所見即所得、簡單拖拽配置的簡潔、高效方式實現(xiàn)大數(shù)據(jù)處理流程化配置、運行與智能監(jiān)控。該系統(tǒng)目前已貢獻到開源社區(qū),吸引了大批中小企業(yè)、院所高校用戶,支撐了科技、工業(yè)、跨境電商、數(shù)據(jù)資產管理、醫(yī)療健康等領域大量軟件工程案例。2019年PiFlow獲“GVP-碼云最有價值開源項目”獎和首屆“中國開源科學軟件創(chuàng)意大賽”二等獎。
GeoBox是在“地球大數(shù)據(jù)科學工程”專項的支持下,由計算機網絡信息中心團隊針對大規(guī)模遙感影像數(shù)據(jù)的存儲、管理與分析等問題自主研發(fā)的遙感大數(shù)據(jù)核心引擎。該引擎突破了大規(guī)模遙感數(shù)據(jù)高效存儲、分布式按需計算和交互式分析工作流等多項關鍵技術,實現(xiàn)了億級元數(shù)據(jù)高效管理和PB級實體數(shù)據(jù)分析服務。由GeoBox遙感大數(shù)據(jù)核心引擎支撐建設的“地理空間數(shù)據(jù)云(GSCloud)”,數(shù)據(jù)在線服務量超1PB,專業(yè)用戶數(shù)達50萬人,持續(xù)運行13年。(撰稿:趙江華、朱小杰)