Machine learningDeep learning / NLP / CV

Мультимодальна семантична сегментація

Мультимодальна семантична сегментація призначає мітку семантичного класу кожному пікселю сцени, об'єднуючи інформацію з двох або більше сенсорних модальностей — найчастіше RGB-зображень у парі з картами глибини (RGB-D), хмарами точок LiDAR, тепловими камерами або текстовими описами. Глибокі мережі типу «кодер-декодер» навчаються вирівнювати та об'єднувати комплементарні сигнали з кожної модальності, забезпечуючи щільнішу та точнішу сегментацію, ніж будь-який одномодальний підхід.

Відкрити у MethodMindНезабаромВідеоНезабаромDownload slides

Читати метод повністю

Лише для учасників

Увійдіть із безкоштовним обліковим записом, щоб прочитати цей розділ.

Увійти

Method map

The neighbourhood of related methods — select a node to explore.

Джерела

  1. Hazirbas, C., Ma, L., Domokos, C., & Cremers, D. (2016). FuseNet: Incorporating Depth into Semantic Segmentation via Fusion-based CNN Architecture. In Proceedings of the Asian Conference on Computer Vision (ACCV). Springer. link
  2. Zhang, J., Liu, H., Yang, K., Hu, X., Liu, R., & Stiefelhagen, R. (2023). CMX: Cross-Modal Fusion for RGB-X Semantic Segmentation with Transformers. IEEE Transactions on Intelligent Transportation Systems, 24(12), 14801–14813. DOI: 10.1109/TITS.2023.3300537

Як цитувати цю сторінку

ScholarGate. (2026, June 3). Multimodal Semantic Segmentation (Multi-Sensor Pixel-Level Scene Understanding). ScholarGate. https://scholargate.app/uk/deep-learning/multimodal-semantic-segmentation

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

Згадується в

ScholarGateMultimodal Semantic Segmentation (Multimodal Semantic Segmentation (Multi-Sensor Pixel-Level Scene Understanding)). Отримано 2026-06-15 з https://scholargate.app/uk/deep-learning/multimodal-semantic-segmentation · Набір даних: https://doi.org/10.5281/zenodo.20539026