您好！欢迎访问云南省人工智能重点实验室
专利
 名称： |
基于编码-解码端的图像对差异描述方法 |
| 作者： |
高盛祥, 岳圣斌, 余正涛 |
| 类型： |
发明专利 |
| 状态： |
已授权 |
| 专利号/登记号： |
202210248468.7 |
| 申请日/受理日： |
2022-03-14 |
| 公告日： |
2022-06-03 |
| 授权日： |
2023-03-24 |
| 简介： |
本发明涉及基于解码?编码端的图像对差异描述方法。本发明包括：1)首先从预训练好的特征提取器中提取出图像的视觉特征；2)然后对这些特征语意之间的交互和位置关系进行建模来获取图像的细粒度信息；3)通过图片间分层交互匹配模块来精准地表征图像间的差异，排除视角/光照变化带来的干扰。4)最后通过基于从上到下的LSTM来对齐视觉和文本特征，然后解码出能够描述出图像间差异的句子。本发明具有强大的鲁棒性，能在存在视角、光照等干扰因素下准确的描述两张图像之间的差异，在该领域所提供的公共数据集的实验中，本发明的评价指标超过了目前最先进的模型，达到国际领先水平。 |
