光流图后处理之填洞

目前填洞这一操作只有两种方法,基于时序(temporal)和基于空间(spatial)(也有两者结合的骚操作)

基于时序的

需要多帧的信息,可以知道哪些pixel是invalid(我管他叫盲填洞)。
目前在flownet上用不了:
1)现有的软件架构不支持多帧融合的操作;
2)tg说硬件上目前也支持不了多帧,开销估计比较大,就算考虑cache的空间/时间局部性估计也不够。而且光流这个问题上,空间上还不一定局部(大位移导致的)。

基于空间的

对于flow这个问题,目前想到的是需要已知哪些pixel是invalid
然鹅,无法像Real Sense相机那样在传统算法匹配(SIFT等)的过程中寻找holes,需要人为的在现有光流图上判断holes.
目前想到的是,基于邻域判断,类似于判断噪声的方式
然鹅,这样做和滤波又有啥区别?

骚操作

试试腐蚀膨胀操作?但是我怕会影响其他像素点.
因为我看LeCun那篇文章的output感觉用下腐蚀膨胀也许会有意外收获。
这里写图片描述
效果还真不错
这里写图片描述

猜你喜欢

转载自blog.csdn.net/weixin_39354819/article/details/81331642