Stability AI har introdusert de siste tilskuddene til språkmodellserien Stable LM 2: en basismodell med 12 milliarder parametere og en instruksjonsjustert variant. Disse modellene ble trent på imponerende to billioner tokens på syv språk: engelsk, spansk, tysk, italiensk, fransk, fransk, portugisisk og nederlandsk.

Modellen med 12 milliarder parametere har som mål å finne en balanse mellom høy ytelse, effektivitet, minnebehov og hastighet. Den følger det etablerte rammeverket i Stability AIs tidligere utgitte tekniske rapport Stable LM 2 1.6B. Denne nye utgivelsen utvider selskapets modellutvalg og tilbyr utviklere et transparent og kraftig verktøy for innovasjon med AI-språkteknologi.

I tillegg til 12B-modellen har Stability AI også lansert en ny versjon av Stable LM 2 1.6B-modellen. Denne oppdaterte 1.6B-varianten forbedrer samtaleegenskapene på de samme sju språkene, samtidig som systemkravene er bemerkelsesverdig lave.

Stable LM 2 12B er utformet som en effektiv, åpen modell som er skreddersydd for flerspråklige oppgaver med jevn ytelse på allment tilgjengelig maskinvare.

Ifølge Stability AI kan denne modellen håndtere oppgaver som vanligvis bare er gjennomførbare for betydelig større modeller, som ofte krever betydelige beregnings- og minneressurser, for eksempel store Mixture-of-Experts (MoEs). Den instruksjonsavstemte versjonen er spesielt godt egnet for ulike bruksområder, blant annet som en sentral del av RAG-systemer for gjenfinning, på grunn av den høye ytelsen ved bruk av verktøy og funksjonskall.

I prestasjonssammenligninger med populære sterke språkmodeller som Mixtral, Llama2, Qwen 1.5, Gemma og Mistral, gir Stable LM 2 12B solide resultater når den testes på zero-shot- og few-shot-oppgaver på tvers av generelle benchmarks i Open LLM Leaderboard:

Med denne nye versjonen utvider Stability AI StableLM 2-familien til 12B-kategorien og tilbyr en åpen og transparent modell uten at det går på bekostning av kraft og nøyaktighet. Selskapet er overbevist om at denne utgivelsen vil gjøre det mulig for utviklere og bedrifter å fortsette å utvikle fremtiden samtidig som de beholder full kontroll over dataene sine.

Utviklere og bedrifter kan nå bruke Stable LM 2 12B til kommersielle og ikke-kommersielle formål med et Stability AI-medlemskap.