Multimodal instanssegmentering

Multimodal instanssegmentering utvider klassisk instanssegmentering — som tilordner en per-piksel maske og en klasselabel til hvert individuelle objekt i et bilde — ved å inkludere komplementære sensordata som dybdekart, LiDAR-punktskyer eller infrarøde bilder. Fusjonering av disse modalitetene hjelper modellen med å håndtere tvetydige utseender, svakt lys og okklusjon som utfordrer systemer som kun bruker RGB.