GLM-5.3 viser, hvorfor LLM-træning flytter ind i drift

2 min read

GLM-5.3 posttræning og LLM-sikkerhed

Z.ai har lanceret GLM-5.3, og nyheden er mere interessant end endnu en tabel med benchmarktal. Modellen bygger på samme grundmodel som GLM-5.2. Leverandøren siger, at fremskridtet kommer fra en måned med mere posttræning: flere kørende opgavemiljøer, flere typer opgaver og mere beregningstid i den efterfølgende træning.

Det flytter fokus fra parameterkapløbet til noget, der er sværere at købe sig til: gode miljøer, hvor en agent kan arbejde, fejle og blive målt på et resultat. For teams, der bruger modeller til kodning, er det et langt mere brugbart spørgsmål end om næste model har fået et større tal på kassen.

Posttræning er blevet selve produktet

En sprogmodel lærer først brede mønstre i store datamængder. Posttræningen bagefter former den til konkrete opgaver, værktøjer og arbejdsgange. Z.ai beskriver GLM-5.3 som samme base som GLM-5.2, men trænet videre med miljøer, der skal ligne længerevarende engineering-opgaver: kodebaser, dokumentation, lagring, eksperimenter og flere afhængige skridt.

Det er plausibelt, at den slags arbejde giver mere end endnu en omgang generel pretraining. En coding-agent fejler sjældent, fordi den ikke kan skrive en enkelt funktion. Den fejler, når den mister kontekst, vælger forkert test, misforstår en intern afhængighed eller afleverer en patch, som ser fornuftig ud, men ødelægger resten af systemet.

Z.ai oplyser blandt andet en stigning på Terminal-Bench 3.0 fra 4,6 til 28,3 og på DeepSWE v1.1 fra 46,2 til 66,9 sammenlignet med GLM-5.2. Tallene kommer fra leverandøren selv og er ikke en garanti for samme effekt i din kodebase. Men retningen er væsentlig: træningsmiljøet og verifikationen får større betydning end den næste ændring i modelarkitekturen.

Et benchmark er ikke en merge-godkendelse

GLM-5.3 har allerede en forgænger på sitet, GLM-5.2. Den nye vinkel er ikke, at en kinesisk model igen ser stærk ud på en rangliste. Det er, at leverandøren selv flytter modeltræningen tættere på agentarbejde med rigtige udviklingsmiljøer.

Det gør også benchmarkdisciplinen vigtigere. The New Stack peger på, at GLM-5.3 stadig ligger bag lukkede frontiermodeller på ExploitBench, selv om den er blevet væsentligt bedre til at finde sårbarheder. At identificere et muligt problem i kildekoden er noget andet end at dokumentere reachability i produktion, bygge en sikker rettelse og sikre, at den ikke skaber regressioner.

Det er den samme lektion som ved programmatisk tool calling: mere autonomi kræver en hårdere kontrolflade. En agent må gerne have testmiljø, branch, begrænsede credentials og et defineret budget. Den skal ikke have fri adgang til produktionsdata, deploy-nøgler og netværket, fordi dens benchmark er flot.

Cyber-fremgangen er både nytte og alarm

Z.ai fremhæver også cybersikkerhed. På CyberGym angiver virksomheden 84,5 procent mod 77,2 for GLM-5.2. På ExploitBench går tallet fra 24,4 til 54,4. Leverandøren skriver, at den derfor udskyder frigivelsen af vægtene i cirka to uger, mens sikkerhedsevaluering og hardening færdiggøres.

Det er fornuftigt, men ikke tilstrækkeligt som kontrol. Når vægtene kan køres lokalt, er adgangskontrollen hos API-leverandøren væk. For danske virksomheder er den praktiske opgave derfor at skille defensive og offensive workflows ad: kør scanning mod godkendte kodebaser, log alle agentkald, lad en menneskelig reviewer godkende patches, og brug isolerede sandkasser uden produktionshemmeligheder.

Der er en ekstra faktor ved kinesiske open-weight-modeller. Åbne vægte kan give bedre data- og driftskontrol, hvis de køres i eget miljø. Men organisationen skal stadig vurdere leverandørens jurisdiktion, træningsdata, opdateringskæde og afhængigheder. “Lokalt” er ikke det samme som gennemgået. Hentede modeller, containere og agent-skills hører hjemme i den almindelige software supply-chain-kontrol.

Hvad udviklingsteams bør gøre nu

Vent med at konkludere, at GLM-5.3 erstatter Claude eller GPT i jeres udviklingsflow. Vægtene er endnu ikke frigivet, og de mest opsigtsvækkende tal kommer fra Z.ai. Men brug lanceringen som anledning til at forbedre jeres egen evaluering.

  • Vælg 10 til 20 reelle opgaver fra jeres backlog med kendte acceptkriterier.
  • Mål patch-kvalitet, testresultater, tid, tokenforbrug og hvor ofte en reviewer må rydde op.
  • Giv agenten mindst mulige privilegier, og hold dens filer, netværk og secrets adskilt fra produktion.
  • Gem prompts, tool-kald og diffs, så en fejl kan undersøges efterfølgende.

Det er kedeligere end at skifte modelnavn i en konfigurationsfil. Det er også sådan, man finder ud af, om posttræning faktisk har gjort en agent bedre i ens egen drift.

Kilder

Denne artikel er skrevet i samarbejde med AI, og efterfølgende redigeret af et rigtigt menneske 🙂

Skriv et svar

Din e-mailadresse vil ikke blive publiceret. Krævede felter er markeret med *