小程序
传感搜
传感圈

新突破!红外真彩转换算法再升级:热成像&可见光视频流畅转换

2022-08-02
关注

艾睿光电红外真彩转换算法重磅升级!全新ROMA算法,应用一种简单有效的交叉空间相似性匹配技术,可充分利用夜间红外数据的结构知识生成真实、流畅的日间可见光视频。这一技术的突破,将让红外热成像在车载、安防、户外等领域,拥有更多的应用途径和发挥空间。

 

全新技术

红外真彩转换算法ROMA

ROMA交叉空间相似性三重约束,全方位保障转换升级,视频转换更加清晰、流畅、稳定:
☑ 基于VIT的多尺度区域判别器,让转换真实可靠,细节清晰,给人更真实的视觉体验。
☑ 时间的交叉空间相关性约束,实现视频转换时空一致,流畅不闪烁。
☑ 全局和局部的交叉空间相关性约束,训练更快更稳定。

 


相关论文已被ACM MM2022接收
论文地址:https://arxiv.org/abs/2204.12367
代码地址:https://github.com/BIT-DA/ROMA

 


 



 ROMA算法原理框图

 

热成像&可见光

视频流畅转换

将夜间红外的黑白世界转化为日间人眼所见的世界,面临重重困难和挑战:无法获取的配对数据、不同的成像原理、不同的成像风格、不同的场景等。ROMA算法帮助我们建立了翻译的桥梁,从而可以跨越这些障碍,实现夜间热成像向日间可见光的清晰流畅转换。



更优秀的转换效果
更真实可靠的红外真彩,更好的时空一致性,更流畅的视频体验,不闪烁不跳变。
  

效率/检测/融合 三重升级

效率升级:10倍+训练速度,极速工业部署
ROMA算法能够极速完成模型训练,比F/LSeSim算法快11倍,助力红外真彩快速落地各平台和设备。


 

检测升级:更精准的夜间检测,安全防护
转换后目标更清晰,检测更精准,赋能ADAS,多重保障更安心。
融合升级:更清晰的视频融合
红外真彩助力融合,加强夜间视觉,让场景更清晰,让融合无伪影,夜间观察更流畅。
 

迄今最大的

双光城市数据集开源

最新InfraredCity数据集,城市、高速公路和监控场景下未配对的夜间红外和日间可见光视频,包含将近60万帧图像,比IRVI大20倍。

这是当前针对日夜红外真彩转换领域,最大的开源双光城市数据集,场景真实且丰富。艾睿光电愿与行业合作伙伴携手,共同推动红外热成像技术的发展和应用,进一步推动行业繁荣发展。

数据集地址:http://openai.raytrontek.com/apply/Infrared_city.html/

  • 算法
  • 红外成像
  • 热成像
  • 可见光
您觉得本篇内容如何
评分

评论

您需要登录才可以回复|注册

提交评论

提取码
复制提取码
点击跳转至百度网盘