náhled|Logo modelů Gemma Gemma (jazykový model) je rodina velkých jazykových modelů dostupných ze zdrojového kódu, kterou vyvinula společnost Google DeepMind. Vychází z jazykového modelu Gemini. První verze vyšla v roce 2024; druhá verze Gemma 2 v červnu 2024, Gemma 3 v březnu 2025 a svobodný a otevřený software Gemma 4 v dubnu 2026 (pod licencí Apache). Vizuální model nese název PaliGemma a model zaměřený na lékařské konzultace zase MedGemma. Do května 2025 si model Gemma stáhlo 150 milionů uživatelů.
Architektura Gemma 3 je založena na transformátorové architektuře s dekodérem, pozorností pro seskupené dotazy (GQA) a kodérem vidění SigLIP. Každý model má délku kontextu 128 kB, s výjimkou Gemmy 31B, která má délku kontextu 32 kB.https://arxiv.org/abs/2503.19786v1 Nejnovější generací modelů je Gemma 4, vydaná 2. dubna 2026. Je k dispozici ve čtyřech velikostech: Effective 2B (E2B), Effective 4B (E4B), 26B Mixture of Experts (MoE) a 31B Dense. Gemma 4 podporuje multimodální vstup, včetně obrázků a videa napříč všemi modely, s nativním zvukovým vstupem u modelů E2B a E4B. Varianta 31B Dense u Gemmy 4 dosáhla třetího místa v textovém žebříčku Areny a varianta 26B dosáhla šestého místa. Gemma 4 12B byla vydána 3. června 2026 a nabízí jednotnou multimodální architekturu, která zpracovává obrazy a zvuk bez kodérů.
Varianty Google vyvíjí oficiální varianty modelů Gemma určené pro specifické účely, jako je lékařská analýza nebo programování. Patří mezi ně:
ShieldGemma 2 (4B): ShieldGemma, založená na rodině Gemma 3, je navržena k identifikaci a filtrování násilných, nebezpečných a sexuálně explicitních obrázků. MedGemma (4B a 27B): MedGemma, rovněž založená na Gemma 3, je navržena pro lékařské aplikace, jako je analýza obrazu. Google však také poznamenává, že MedGemma „zatím není klinicky certifikovaná“. Vývojáři ze společnosti Tap Health v indickém Gurgaonu použili MedGemmu k vylepšení aplikací pro léčbu diabetu s podporou umělé inteligence. DolphinGemma (zhruba 400 milionů): DolphinGemma, vyvinutá ve spolupráci s výzkumníky z Georgijského technického institutu a projektu Wild Dolphin, si klade za cíl lépe porozumět komunikaci delfínů prostřednictvím analýzy zvuku. Žádný model ani data však nebyly veřejně zveřejněny. CodeGemma (2B a 7B): CodeGemma je skupina modelů určených pro doplňování kódu i pro obecné kódování. Podporuje více programovacích jazyků, včetně Pythonu, Javy, C++ a dalších.
Reference
Kategorie:Velké jazykové modely Kategorie:Software Googlu