英伟达开发 ClearSightNet:让无人车摄像头看的更清楚
自动驾驶汽车依靠相机来观察周围环境。 但是,雨/雪或其他堵塞等环境因素会影响相机视觉。 除了能够理解其周围环境之外,任何强大的感知系统都应该能够推断出来自传感器的数据的有效性。为此,在下游模块处理数据之前,必须尽早在处理管道中检测传感器数据无效。
英伟达近日开发了 ClearSightNet,这是一种深度神经网络(DNN),经过训练,可以评估摄像机清晰看到的能力,并帮助确定遮挡、堵塞和可见度降低的根本原因。 它的开发考虑到以下要求:
能够推断出相机失明的各种潜在原因;
输出可操作的有意义的信息;
必须非常轻量级,因此它可以在多个摄像头上运行,并且计算开销最小。