Multimodal Object Detection (Multi-Sensor / Cross-Modal Deep Detection)

Una càmera RGB estàndard té dificultats en escenes amb poca llum o ocloses, mentre que un sensor de profunditat no pot capturar detalls de color o textura. La detecció multimodal combina els punts forts de diversos tipus de sensors: una modalitat compensa els punts cecs d'una altra. Penseu-hi com donar a un model la vista i el sentit de la distància simultàniament: la percepció combinada és més rica que cadascuna per separat i fa més difícil que les condicions adverses enganyin completament el detector.