人工智能深度“补片” AI将卫星“废片”变成高分辨率地图资源
卫星虽被形象地称为“天眼”,事实上卫星数据的应用,却难以做到“尽收尽用”。
中国工程院院士杨小牛就曾经表示,卫星在天上飞来飞去,效能其实并不高,每天只有几十分钟时段内采集到的数据是地面需要的。
那些大量的被认为是无效数据的“废片”,有没有可能被利用起来?
近日,清华大学理学院院长、地球系统科学系主任宫鹏介绍,在高性能云计算的支持下,通过数据建模、人工智能算法等手段,清华大学地球系统科学系制作完成了首套中国30米逐日无缝遥感观测数据集,以及逐季节土地覆盖和逐年土地利用的数据集,让“拼图无解”的卫星“废片”能够成为高分辨率的地图资源。
人工智能深度“补片”
“传统的对地卫星观测,拍下来的照片是不同时间采集的,拼在一起并不完整,使用门槛很高。”宫鹏解释,卫星直接获得的图片不能拿来直接用,因为卫星图片不是自然连续的,很可能像100块的拼图,有时候是少了50块的效果,但也有可能同样的拼图来了好几块。
不止如此,卫星轨道的偏差还会造成同一地方不同时间拍摄的图片难以重叠,云彩的遮挡、雾气不均匀的散射都会导致大量的卫星遥感数据难以反映地表的真实情况,而成为难用的“废片”。
基于此前完成10米分辨率全球地表覆盖制图数据处理过程中积累的经验,清华大学地球系统科学系团队自主研发了时空数据融合重建的技术。
“我们构建了人工智能需要的知识库,其中包括世界首套全球全季节普适样本库和相关领域知识。库中分为训练样本库和完全独立的验证样本库。”清华大学博士生刘涵介绍,团队设计了一套适应遥感大数据的深度遥感特征学习和分类模型,利用机器学习和数据建模对人工智能系统进行了训练,使其能够“理解”或者说“推断”出缺失的图块,进而补缺。
“就好像现在一些APP身份验证时,会有一个补图的步骤,经过训练的模型,也可以大规模分析现有的卫星图片,自动补图,且做到数据与真实情况相符合。”刘涵说。
通过训练,模型可完成高性能的推理,把不完整的“拼图”重建成时空一致的图像库,建立起这一深度遥感制图模型的“超能力”,完成各种不合格“废片”的补片工作,从而生成与真实情况相匹配的遥感观测数据集。例如通过人工智能技术可识别路面是沥青、土路还是水泥路面等地表覆盖类型。
计算上云避免巨大资源消耗
“地球系统科学使用和产生的数据是极其巨大的,例如气候模拟和预测会生成时间间隔在小时级、地面分辨率是3公里的气候数据,这些数据的数据量级往往相当于数百万集高清电影的量级。”宫鹏介绍,因此需要超强算力来完成。
如果为这些数据进行数据中心建设的话,需要三四百个机柜,占地成本和时间成本耗费巨大。对这些数据集中的数据进行AI处理时,如果不在云上进行而是搬运下载后再运算,那光是用来搬运的时间也可能需要几个月。
而通过云上高性能计算,则能够把算力部署在公共数据集周边,围绕数据进行计算。据介绍,亚马逊云服务(AWS)为此次项目的完成提供了10万核左右的云上高性能计算资源。
此外,AWS上还提供一整套完善的人工智能和机器学习的套件和服务以及自动化多层堆叠集成技术,可用于对模型结构和参数进行深度调优,并进行分布式高性能推理。
“现在中学生、小学生想拿数据做点什么,从里面拉几条曲线,或者把一个区域拿出来做一些探测、变化、趋势的分析,都已经变得非常容易。”宫鹏说,对于卫星公共数据的梳理、重建,让卫星遥感图的使用门槛大大降低,如果说之前只有专业用户能从数据中获得价值,那么以后更多的普通用户也能看懂和利用这些数据。(记者 张佳星)
相关阅读
-
北汽蓝谷加速高端转型 市场看好极狐品...
10月30日,北汽蓝谷披露2022年第三季度报告。报告显示,北汽蓝谷202... -
正股涨停可转债为什么不涨?垃圾发电上...
在股票市场上,股票与可转债具有一定的联动性,即当股票上涨时,会... -
人民币升值对a股有什么影响?2022年IDC...
人民币贬值对股市来说是一种利好,会推动股市上涨,即人民升值,国... -
可转债配售比例一般是多少?生态农业上...
各大上市公司可转债的配售比例是不一样的,主要还是在于上市公司的... -
海航控股市值多少亿?个股的常用技术指...
海航控股10月31日股价,截至11时,该股跌2 68%,股价报1 450元,... -
怎么知道自己中签了?克明食品最新报价...
截止11时04分,克明食品报10 850元,跌0 09%,总市值36 67亿元。... -
勤哲Excel服务器无代码实现住建局综合业...
一直以来,我国对于房地产行业都倾向于正向的扶持和引导,有专家认... -
全球财务领导力与风险评估师GFLRA—加速...
新一代信息技术正在深刻影响着经济社会的高质量发展。国家十四五规... -
前三季度深圳地区生产总值为22925.09亿...
10月29日,市统计局发布最新统计数据, 2022年前三季度深圳地区生... -
10月31日A股盘前要闻
10月31日A股盘前要闻 -
智通A股融资融券统计|10月28日
智通A股融资融券统计|10月28日 -
每日动态!机构策略:情绪交易集中释放 ...
机构策略:情绪交易集中释放带来右侧更好买点 -
【世界速看料】《大霄说》第一千五百期
《大霄说》第一千五百期 -
4963家A股上市公司披露三季报超八成盈利...
4963家A股上市公司披露三季报超八成盈利新能源赛道抢眼传统产业回暖 -
全国首个混凝土模块化高层建筑吊装完成...
5栋近百米高楼,由6028个混凝土模块单元组成,一年可建成!近日,深... -
“深南电路杯”设置6个赛项 选手大多为...
近日,高鹏展翅 园梦启航2022第十八届深南电路杯航空模型大赛在深... -
禹城市工商联建立民营经济统战工作协调...
民营经济顶起了山东省禹城市经济的大半边天。近年来,禹城市不断加... -
玉山县发挥“工商联+司法局”沟通联系机...
法治是最好的营商环境。近年来,江西省玉山县紧盯企业需求,充分发... -
财富周历 动态前瞻丨本周将公布10月PMI...
财富周历动态前瞻丨本周将公布10月PMI数据,8只新股发行 -
A股步入深度价值区间 安全性和确定性正...
A股步入深度价值区间安全性和确定性正成为当前市场关注的重点