科研之友
微信
新浪微博
Facebook
分享链接
摘要
本发明公开了一种跨模态极光涡旋图像检索方法,主要解决现有技术不能通过空间参数检索极光涡旋图像的问题,其实现方案是：读取极光涡旋数据库数据,并对其进行预处理；利用层级Transformer网络对预处理后的空间参数进行特征提取；计算不同空间参数组特征之间的关系矩阵；利用Resnet18网络提取极光涡旋图像特征,利用关系矩阵及图像特征计算损失函数通过反向传播修正层级Transformer网络及ResNet18网络；计算空间参数特征和极光涡旋图像特征的余弦距离,以检索出极光涡旋图像。本发明充分考虑不同模态数据时间的关系,能通过调整不同空间物理参数组合检索极光涡旋图像,可用于从大量图像中筛选极光涡旋图像。
- 单位
