Preguntes i Respostes Multimodal
La pregunta-resposta multimodal (Multimodal QA) és una classe de mètodes d'aprenentatge profund que responen preguntes en llenguatge natural raonant conjuntament sobre informació de múltiples modalitats, més comunament text i imatges, però també vídeo, àudio i taules estructurades. Introduïda de manera prominent a través del benchmark VQA el 2015, des de llavors s'ha expandit a una àmplia àrea de recerca que impulsa la comprensió de documents, l'assistència al diagnòstic mèdic i la IA incorporada.
Llegeix el mètode complet
Inicia la sessió amb un compte gratuït per llegir aquesta secció.
Method map
The neighbourhood of related methods — select a node to explore.
Fonts
- Antol, S., Agrawal, A., Lu, J., Mitchell, M., Batra, D., Zitnick, C. L., & Parikh, D. (2015). VQA: Visual Question Answering. Proceedings of the IEEE International Conference on Computer Vision (ICCV), 2425–2433. DOI: 10.1109/ICCV.2015.279 ↗
- Xu, P., Zhu, X., & Clifton, D. A. (2023). Multimodal learning with transformers: A survey. IEEE Transactions on Pattern Analysis and Machine Intelligence, 45(10), 12113–12132. DOI: 10.1109/TPAMI.2023.3275156 ↗
Com citar aquesta pàgina
ScholarGate. (2026, June 3). Multimodal Question Answering (Cross-Modal QA). ScholarGate. https://scholargate.app/ca/deep-learning/multimodal-question-answering
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- Classificació basada en BERTAprenentatge profund↔ compare
- Classificació multimodal basada en BERTAprenentatge profund↔ compare
- Multimodal Sentence EmbeddingsAprenentatge profund↔ compare
- Resum de text multimodalAprenentatge profund↔ compare
- Multimodal TransformerAprenentatge profund↔ compare
Citat per
Has vist cap problema en aquesta pàgina? Informa'n o suggereix una correcció →