Machine learningDeep learning / NLP / CV

Multimodális konvolúciós neurális hálózat

A multimodális konvolúciós neurális hálózat (MM-CNN) két vagy több bemeneti modalitást – például képeket és szöveget, vagy videót és hangot – dolgoz fel és egyesít dedikált konvolúciós ágakon keresztül, tanulva egy közös reprezentációt, amely kiegészítő jeleket rögzít minden forrásból. Az egyesített reprezentáció egy lefelé irányuló feladatot hajt végre, mint például osztályozás, regresszió vagy lekérdezés.

Megnyitás itt: MethodMindHamarosanVideóHamarosanDownload slides

A teljes módszer elolvasása

Csak tagoknak

Jelentkezzen be ingyenes fiókkal a szakasz elolvasásához.

Bejelentkezés

Method map

The neighbourhood of related methods — select a node to explore.

Források

  1. Ngiam, J., Khosla, A., Kim, M., Nam, J., Lee, H., & Ng, A. Y. (2011). Multimodal deep learning. In Proceedings of the 28th International Conference on Machine Learning (ICML), 689–696. link
  2. Zhang, Y., Yin, C., Li, Y., Li, D., & Tian, Q. (2020). Multimodal intelligence: Representation learning, information fusion, and applications. IEEE Journal of Selected Topics in Signal Processing, 14(3), 478–493. DOI: 10.1109/JSTSP.2020.2987728

Hogyan hivatkozzon erre az oldalra

ScholarGate. (2026, June 3). Multimodal Convolutional Neural Network (MM-CNN). ScholarGate. https://scholargate.app/hu/deep-learning/multimodal-convolutional-neural-network

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

Hivatkozik rá

ScholarGateMultimodal Convolutional Neural Network (Multimodal Convolutional Neural Network (MM-CNN)). Letöltve 2026-06-15, forrás: https://scholargate.app/hu/deep-learning/multimodal-convolutional-neural-network · Adatkészlet: https://doi.org/10.5281/zenodo.20539026