Kort fortalt

  • Redegjørelsen er publisert 15. oktober; dette er ikke en bekreftet modell-lanseringsdato.
  • StepFun beskriver 92 transformerblokker og sparsomme oppmerksomhetsmekanismer.
  • Agentbasert datakonstruksjon og treningsstabilitet forklares av selskapet selv.

En teknisk redegjørelse, ikke en ny lanseringsdato

StepFun publiserte 15. oktober en teknisk gjennomgang av Step 5 Preview. Innlegget forklarer arkitektur og trening for agentoppgaver med mange verktøykall og lange arbeidsforløp. Datoen gjelder denne redegjørelsen, ikke en verifisert dato for modellens første lansering.

Selskapet beskriver en smal og dyp arkitektur med 92 transformerblokker. Den kombinerer vindusbasert oppmerksomhet med sparsomme fulloppmerksomhetslag i et forhold på tre til én. StepFun omtaler Sparse GQA som en del av arbeidet med trening og inferens på kontekster opptil én million tokener.

Treningsstabilitet og kontroll av agentdata

Ifølge gjennomgangen brukes FP32 for blant annet skjulte tilstander og en skaleringsfaktor i normaliseringen for å håndtere treningsustabilitet. Den beskriver også begrensning av særlig store gradientverdier. Opplysningene kommer fra utviklernes egen tekniske beskrivelse.

Treningsdata konstrueres med agenter innenfor prinsipper og kvalitetskontroller fra fagpersoner. StepFun beskriver tiltak mot ensidige oppgaver og utnyttelse av svakheter i evalueringer. Forsterkningslæringen omfatter også kontekstkomprimering og videreføring av lange arbeidsforløp. Gjennomgangen bygger ikke på en uavhengig gjentakelse av forsøkene, og KIavisa har ikke kjørt modellen eller bekreftet selskapets resultat- og effektpåstander.

Kalenderdatoen gjelder den tekniske redegjørelsen. Den dokumenterer ikke i seg selv modellens opprinnelige lanseringsdato, og et publiseringsklokkeslett er ikke verifisert. Når kilden ikke oppgir klokkeslett, regner vi alderen fra tidligst mulige tidspunkt den dagen.

Kilder og åpenhet

Sammendraget bygger på opplysninger fra StepFun, publisert 15. oktober 2026. Les kilden for alle detaljene og eventuelle senere oppdateringer.

Les originalkilden hos StepFun

Vi har skrevet sammendraget med hjelp fra KI. Vi har ikke selv testet leverandørens påstander eller resultater. Bildet er en illustrasjon, ikke dokumentasjon av produktet eller hendelsen. Slik bruker vi kilder.