Xarxa Neuronal Recurrent Multimodal
Una Xarxa Neuronal Recurrent Multimodal (Multimodal Recurrent Neural Network) combina entrades de dues o més modalitats de dades —com ara imatges, text i àudio— dins d'un marc de processament de seqüències recurrent. Codifica cada modalitat per separat, fusiona les representacions i, a continuació, processa el senyal combinat mitjançant unitats recurrents (RNN, LSTM o GRU) per generar o classificar sortides seqüencials. Aquest disseny la va convertir en un enfocament fonamental en la generació de descripcions d'imatges (image captioning), la descripció de vídeos i el reconeixement de parla audiovisual.
Llegeix el mètode complet
Inicia la sessió amb un compte gratuït per llegir aquesta secció.
Method map
The neighbourhood of related methods — select a node to explore.
Fonts
- Vinyals, O., Toshev, A., Bengio, S., & Erhan, D. (2015). Show and Tell: A Neural Image Caption Generator. IEEE Conference on Computer Vision and Pattern Recognition (CVPR), pp. 3156–3164. DOI: 10.1109/CVPR.2015.7298935 ↗
- Ngiam, J., Khosla, A., Kim, M., Nam, J., Lee, H., & Ng, A. Y. (2011). Multimodal Deep Learning. Proceedings of the 28th International Conference on Machine Learning (ICML), pp. 689–696. link ↗
Com citar aquesta pàgina
ScholarGate. (2026, June 3). Multimodal Recurrent Neural Network (MM-RNN). ScholarGate. https://scholargate.app/ca/deep-learning/multimodal-recurrent-neural-network
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- Unitat recurrent amb portes (GRU)Aprenentatge profund↔ compare
- Long Short-Term Memory (LSTM)Aprenentatge profund↔ compare
- Classificació multimodal basada en BERTAprenentatge profund↔ compare
- Xarxa Convolucional MultimodalAprenentatge profund↔ compare
- Multimodal TransformerAprenentatge profund↔ compare
- Xarxa Neuronal RecurrentAprenentatge profund↔ compare
Citat per
Has vist cap problema en aquesta pàgina? Informa'n o suggereix una correcció →