Mamba (Model Ruang Keadaan)

Mamba ialah seni bina model jujukan yang diperkenalkan oleh Gu dan Dao pada tahun 2023 yang mencapai kerumitan masa linear sambil mengekalkan prestasi yang kukuh pada tugasan pemodelan bahasa. Dengan menggabungkan model ruang keadaan dengan selektiviti yang bergantung pada input, Mamba menangani kerumitan kuadratik transformer sambil mengekalkan kuasa pemodelan.