Machine learningDeep learning / NLP / CV

Мультимодальне узагальнення тексту

Мультимодальне узагальнення тексту генерує стислий текстовий виклад шляхом спільної обробки кількох вхідних модальностей — найчастіше тексту та зображень, але також кадрів відео або аудіо — за допомогою моделей глибокого навчання, які узгоджують візуальні та мовні представлення. Результатом є виклад природною мовою, що охоплює найважливіший зміст усіх доступних модальностей.

Відкрити у MethodMindНезабаромВідеоНезабаромDownload slides

Читати метод повністю

Лише для учасників

Увійдіть із безкоштовним обліковим записом, щоб прочитати цей розділ.

Увійти

Method map

The neighbourhood of related methods — select a node to explore.

Джерела

  1. Zhu, J., Li, H., Liu, T., Zhou, Y., Zhang, J., & Zong, C. (2018). MSMO: Multimodal Summarization with Multimodal Output. Proceedings of the 2018 Conference on Empirical Methods in Natural Language Processing (EMNLP), 4154–4164. link
  2. Zhu, J., Zhou, Y., Zhang, J., Li, H., Zong, C., & Li, C. (2020). Multimodal Summarization with Guidance of Multimodal Reference. Proceedings of the AAAI Conference on Artificial Intelligence, 34(05), 9749–9756. link

Як цитувати цю сторінку

ScholarGate. (2026, June 3). Multimodal Text Summarization (Cross-Modal Abstractive and Extractive Summarization). ScholarGate. https://scholargate.app/uk/deep-learning/multimodal-text-summarization

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

Згадується в

ScholarGateMultimodal Text Summarization (Multimodal Text Summarization (Cross-Modal Abstractive and Extractive Summarization)). Отримано 2026-06-15 з https://scholargate.app/uk/deep-learning/multimodal-text-summarization · Набір даних: https://doi.org/10.5281/zenodo.20539026