查看原文
其他

50PB容量,500万亿次计算能力:国家遥感数据池开建!

刘小贤 泰伯网 2022-05-16

国遥感领域多个数据共享平台的数据使用、共享机制有望迎来统一。9月5日,中国科学院空天信息创新研究院发布消息称,国家对地观测科学数据中心2019-2025建设运行实施方案专家论证会近日已于北京召开。中心建成后将为科学家免费提供大量遥感数据,同时提供50PB的存储空间和500万亿次的计算能力,将满足大多数科研人员对我国大量遥感数据的使用、处理需求。
泰伯网了解到,用户可在中心搭建的平台上下载多渠道遥感数据,甚至可以在不下载数据的前提下上传模型或算法,以直接实现数据在线处理。这与谷歌地球此前提供的Google Earth Engine(GEE)功能相类似,但中心将建立更完善的技术和更符合中国研究人员的使用体系。
该中心在今年早些时候被科技部、财政部列入50个国家级科技资源共享服务平台名单,由中央财政支持建设。中心由中科院主管,依托中国科学院遥感与地球数字研究所建设。平台将沿袭现有国家遥感中心国家综合地球观测数据共享平台作为门户入口。
目前我国科研人员获取遥感数据的成本颇高。他们主要从至少5种渠道下载影像数据,包括资源、海洋、气象三大卫星应用中心,高分应用综合信息服务共享平台和自然资源部国土卫星遥感应用中心等。然而对科研人员而言,可能并不了解在哪个渠道可以下载符合需求的数据;即使非常了解这些平台,但对于研究中涉及多种数据类型的,研究者需在多个平台完成注册并分别申请数据。这些都显著增加了数据的获取成本。
国家对地观测科学数据中心的建立,将整合包括上述5种渠道在内,共计十余个遥感机构的部分数据以供以科研人员为主的公众使用。
国家对地观测科学数据中心主任李国庆告诉泰伯网,中心整合的并非这些机构的全部数据。而主要是汇聚这些平台生产的能产生普世性科学价值的“科学数据”。从我国遥感数据的普遍分级来看,主要是3级及以上的高级遥感影像产品。
平台汇集3级及以上的对地观测科学数据
这类影像约占上述机构数据的1/3。避开0-2级也可以避免与上述机构的已有业务形成冲突。另外也有包括二十一世纪空间、长光卫星在内的部分商业卫星机构已经或将要与中心签订协议,并为后者提供数据和信息。

目前中心已与13家机构签订协议
中心并非鼓励以科研人员为主的大众用户直接下载数据,相反中心鼓励科研人员在云端直接上传模型或算法,直接在云端处理数据并生成结果。由此消耗的存储空间和算力都由平台提供,即存算一体。既提升科研人员的工作效率,又可为其节约科研成本。
李国庆举例,过去100T的数据仅下载就需要几个月,100万亿次的计算能力租用服务器也造价不菲。现在对于科研人员而言,可以省去这些费用和时间。现在中心存储着2000年后全球陆地卫星的遥感影像,一年的数据量就约15万景。目前只需在云端上传模型,占用150T的存储空间,自动处理数月即可得到全球土地类型分类。在这个过程中完全不需要下载数据。
据了解,除了国内十余个遥感机构作为数据来源之一,中心还主要有另外两部分数据分别来自各级科技计划成果和国外协议卫星机构。
目前科研成果已经形成了良好的强制汇交机制。根据国务院办公厅发布的现行《科学数据管理办法》的规定,政府预算资金资助的各级科技计划(专项、基金等)项目所形成的科学数据,都应汇交至相关科学数据中心,否则将面临项目不通过甚至行政处罚的风险。据李国庆介绍,目前该数据办法在科技部项目中已经实践成熟,未来将进一步扩展到中科院、省市级财政支持的科研项目中,这类数据源也将实现可观增长。
中心建设采取一边建设一边投入使用的模式。目前中心依托国家遥感中心的国家综合地球观测数据共享平台作为使用门户,用户已经可以实现部分功能。根据中心建设时间表,数据共享平台将在2020年实现大改版,并在此后每3年进行一次修改和维护,到2025年中心将成为国际上主要的对地观测科学数据中心之一。
此前,包括上述各类遥感机构都试图提供多种渠道的影像来源,也有企业建设的类似于遥感集市的数据平台,但抑或建设效果均并不明显,抑或后期缺乏稳定运营。而本次平台建设由科技部和财政部支持,中心建设被纳入国家科技资源共享服务平台优化调整名单中,并由国家财政提供资金支持。据李国庆介绍,中心初步建成后,数据和算力需要每年千万级的维护费用。
但政策和财政支持只解决了部分问题。李国庆介绍,平台的形成需要解决各数据供应方的积极性和信任性问题,中心在这方面准备了多项措施。例如在提供数据资源时财政会有相应的鼓励。中心数据被使用时可追溯至数据提供方,以此统计其数据调用的次数并计入对方单位的相应业绩。
深入阅读|点击图片或标题

北斗导航与对地观测供应商国科环宇成科创板上市委否决第一单

《精读》

福建建成首个时空大数据云平台,“大放异彩”还需时日

落子易图通,李书福的隐与显

浪潮:呼吁完善空间信息技术标准体系

首发 | 箩筐8亿全资收购易图通,将发布全时空全矢量非切片地图

旷视招股书深度解读:摊开557页看懂中国AI公司的生意经

七年,明星航天项目失落在大湾区

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存