ScholarGate
Asszisztens
Machine learning

Szakértők keveréke

A szakértők keveréke (Mixture of Experts, MoE) egy szórt neurális hálózati architektúra, amelyet Shazeer és munkatársai vezettek be 2017-ben a szórtan kapuzott MoE réteggel, amelyben minden egyes bemenethez csak a szakértő alhálózatok egy részhalmaza aktiválódik. Olyan modellekben, mint a Switch Transformer és a Mixtral, a számítási költség állandó marad, még akkor is, ha a teljes paraméterek száma növekszik.

Megnyitás itt: MethodMindHamarosanApply, compare, get guidance
Tools & resources
Diák letöltése
Learn & explore
VideóHamarosan

A teljes módszer elolvasása

Csak tagoknak

Jelentkezzen be ingyenes fiókkal a szakasz elolvasásához.

Bejelentkezés

Módszertérkép

A rokon módszerek környezete — válasszon ki egy csomópontot a felfedezéshez.

Források

  1. Shazeer, N. et al. (2017). Outrageously Large Neural Networks: The Sparsely-Gated Mixture-of-Experts Layer. ICLR. arXiv:1701.06538 link
  2. Jiang, A.Q. et al. (2024). Mixtral of Experts. arXiv. link

Hogyan hivatkozzon erre az oldalra

ScholarGate. (2026, June 1). Sparsely-Gated Mixture of Experts (MoE). ScholarGate. https://scholargate.app/hu/deep-learning/mixture-of-experts

Melyik módszer?

Állítsa e módszert a hozzá legközelebb álló rokonai mellé, és olvassa őket egymás mellett — a könyvtár az asztalra teszi a könyveket; a választás az Öné.

Összehasonlítás egymás mellett

Hivatkozik rá

ScholarGateMixture of Experts (Sparsely-Gated Mixture of Experts (MoE)). Letöltve 2026-06-17, forrás: https://scholargate.app/hu/deep-learning/mixture-of-experts · Adatkészlet: https://doi.org/10.5281/zenodo.20539026