AI-ordbog

Weights (Vægte)

De numeriske værdier i en neural network der justeres under træning for at få systemet til at fungere bedre. Milliarder af vægte arbejder sammen til at kode for systemets viden og evner. Når man deler en model deler man i virkelighed dens vægte som andre kan køre lokalt.

01. Definition

Om Weights

Et neuralt netværk består af milliarder af forbindelser, hver med en numerisk vægt. Under træning justeres disse vægte gradvist, så netværket bliver bedre til sin opgave. Vægtene udgør tilsammen alt hvad modellen “ved” – fra sprogforståelse til fakta og ræsonneringsevne.

02. I praksis

Hvordan fungerer vægte i AI?

Når man siger at GPT-4 har “hundredvis af milliarder parametre”, refererer man til antallet af vægte. Når man downloader en open source-model som Llama, downloader man i virkeligheden en stor fil med alle modellens vægte. Fine-tuning justerer et udvalg af disse vægte for at tilpasse modellen til en specifik opgave.

03. Forretningsværdi

Hvorfor er vægte relevante for virksomheder?

At forstå vægte hjælper med at vurdere modellers størrelse, krav til hardware og omkostninger. Det forklarer også hvorfor quantization og distillation virker, og hvorfor open source-modeller giver kontrol – man ejer bogstaveligt talt modellens viden.

Udforsk videre i AI-ordbogen

Se hele ordbogen

Context Window / Context Length

Mængden af tekst som en sprogmodel kan læse og huske på én gang, målt i tokens. Større kontekstvindue tillader modeller at håndtere længere dokumenter og huske tidligere dele af en samtale.

Multimodal AI

AI-systemer der kan arbejde med flere typer data samtidigt såsom tekst, billeder, lyd og video. GPT-4 Vision er et eksempel der kan analysere både tekst og billeder i samme request.

Syntetisk data

Syntetisk data er kunstigt genereret data, der efterligner rigtige data og bruges til træning af AI-modeller.

Indlæs mere

Klar til at komme i gang?

Lad os tage det første skridt sammen

Hos AIgentur møder vi jer dér, hvor I er, og hjælper jer med at omsætte jeres mål og udfordringer til konkrete løsninger.

Måske har I allerede en idé eller et konkret behov. Måske er I bare nysgerrige på, hvordan AI kan bruges i jeres forretning.

Uanset hvad, tager vi gerne en uforpligtende snak, og viser jer, hvordan en struktureret og fleksibel tilgang kan skabe resultater.