Azure OpenAI: kvoter og rate limits

Sådan fungerer kvoter for Azure OpenAI i Microsoft Foundry: tokens og forespørgsler pr. minut pr. model, region og udrulningstype, de offentliggjorte standardværdier, provisioneret kapacitet, hvordan I får mere, og hvad I gør ved 429. Alle oplysninger om Microsoft på denne side kommer fra Microsofts egen dokumentation, linket nedenfor.

Opret en virksomhedskontoeller skriv til contact@standardcompute.com

Standard Compute · Kilder kontrolleret 9. november 2026

Det korte svar

Kvoten for Azure OpenAI tildeles jeres abonnement pr. region, pr. model og pr. udrulningstype i tokens pr. minut (TPM). I fordeler den på udrulninger, og forespørgsler pr. minut (RPM) følger af TPM i et fast forhold pr. model.

Standardkvoterne afhænger af jeres kvote-tier, fra Free (Tier 0) til Tier 6. På Tier 1 får gpt-6.1-sol 250.000 TPM på Global Standard og 100.000 TPM på Data Zone Standard; kunder med Enterprise Agreement og MCA-E starter på højere tiers.

En 429 betyder, at en udrulning har overskredet sin TPM eller RPM, målt i vinduer på 1 eller 10 sekunder. Microsoft anbefaler at respektere retry-after-ms, vente med jitter og fordele forespørgsler på flere udrulninger eller regioner.

Standard Compute samler GPT, Claude, Gemini og åbne modeller bag ét API og sender en begrænset eller fejlet forespørgsel videre til en anden godkendt udbyder af samme model. Så stopper ét abonnements kvote eller nedbrud ikke jeres arbejde.

Sådan fungerer kvoten

Omfang og enheder for Azure OpenAI-kvoten
RegelDetalje
OmfangPr. abonnement, region, model og udrulningstype. Kvoten håndhæves ikke på tenant-niveau
EnhedTokens pr. minut. Hver udrulning tager TPM fra puljen; 240.000 TPM af en model i én region kan være én udrulning eller to på 120.000
Forespørgsler pr. minutProportional med TPM og kan ikke sættes separat. Ældre chatmodeller får 6 RPM pr. 1.000 TPM, gpt-5.5 og o3 får 1, gpt-5.4 får 10
Kvote-tiersFree (Tier 0) og Tier 1 til 6. Tiers stiger automatisk med brugs- og betalingshistorik; EA- og MCA-E-kunder får højere tiers
Ressourcegrænser30 Azure OpenAI-ressourcer pr. region pr. abonnement, 32 standardudrulninger pr. ressource
Global BatchEn separat kvote i tokens i kø, fx 200 millioner for gpt-5.5 på et standardabonnement
Microsoft skifter siden 7. maj 2026 til kvoter på abonnementsniveau, begyndende med Realtime Translate og Realtime Whisper. Global Standard-udrulninger af samme model deler så én pulje på tværs af alle regioner, og Data Zone Standard én pulje pr. datazone.

Offentliggjorte standardkvoter

Standardkvote pr. tier, tokens pr. minut (forespørgsler pr. minut)
Model og udrulningstypeTier 1Tier 3Tier 6
gpt-6.1-sol, Global Standard250.000 (250)2.500.000 (2.500)15.000.000 (15.000)
gpt-6.1-sol, Data Zone Standard100.000 (100)1.100.000 (1.100)5.000.000 (5.000)
gpt-5.5, Global Standard1.000.000 (1.000)4.000.000 (4.000)15.000.000 (15.000)
gpt-5.5, Data Zone Standard333.000 (333)1.333.000 (1.333)5.000.000 (5.000)
gpt-5.4, Global Standard250.000 (2.500)2.500.000 (25.000)15.000.000 (150.000)
gpt-4.1, Global Standard1.000.000 (1.000)9.000.000 (9.000)45.000.000 (45.000)
o3, Global Standard1.000.000 (1.000)4.000.000 (4.000)15.000.000 (15.000)
Fra Microsofts side om kvoter og grænser for Azure OpenAI. gpt-6-sol har de samme værdier som gpt-6.1-sol. Data Zone-kvoter er lavere end Global-kvoter for alle modeller. Free-tier tilbyder kun gpt-4.1-mini, gpt-5-mini, o4-mini og text-embedding-3-small og kan ikke anmode om forhøjelse. Ifølge Microsoft kan grænserne ændre sig.

Kvoter for Claude i Microsoft Foundry

Standardkvote for Claude i Microsoft Foundry, pr. abonnement
AbonnementstypeClaude Opus 5.5 og Sonnet 5.5Claude Fable 5 og 5.1
Betal efter forbrug40 RPM, 40.000 input- og 8.000 output-tokens pr. minut0
Enterprise Agreement og MCA-E10.000 RPM, 10.000.000 input- og 2.000.000 output-tokens pr. minut4.000 RPM, 4.000.000 input- og 800.000 output-tokens pr. minut
Gratis prøveversion00
Input betyder input-tokens, der ikke er cachet. Claude-kvoten styres på abonnementsniveau og deles på tværs af regioner.

Sådan håndhæves grænsen

  • På standardudrulninger tæller TPM de faktiske input- og genererede tokens. En stor max_tokens reserverer ikke kvote dér.
  • RPM tjekkes i korte vinduer, typisk 1 eller 10 sekunder. En udrulning med 600 RPM begrænses over 10 forespørgsler i ét sekund, selv om minuttet holder sig under 600.
  • Afviste forespørgsler tæller med. En bølge af fejlede kald bruger samme grænse som vellykkede.
  • Standardudrulninger deler en kapacitetspulje, og Microsoft kan sænke jeres effektive grænse i nogle timer. Ligger x-ratelimit-limit-tokens under den TPM, I har sat, er det det, der sker.
  • Over et månedligt forbrug pr. model, talt på tværs af tenanten (fx 25 milliarder tokens for gpt-5.5), kan latensen ifølge Microsoft variere mere end det dobbelte.

429-fejl og hvordan I håndterer dem

Throttling-svar fra Azure OpenAI
SvarBetydningMicrosoft anbefaler
429, rate limit is exceededUdrulningen gik over sin TPM eller RPMRespekter retry-after-ms, vent med jitter, begræns genforsøg til 5 til 10, øg trafikken gradvist
429 på en provisioneret udrulningUdnyttelse på 100 %; Microsoft kalder det et signal til trafikstyringPrøv igen efter retry-after-ms, tilføj overløb til en standardudrulning, eller køb flere PTU'er
Midlertidigt utilgængelig, høj efterspørgselDen delte kapacitet er knap, uafhængigt af jeres kvotePrøv igen, fordel belastningen på udrulninger eller regioner, brug provisioneret kapacitet til kritisk arbejde
Hvert svar har headerne x-ratelimit-limit, x-ratelimit-remaining og x-ratelimit-reset for forespørgsler og tokens. Når API Management fordeler trafik på flere backends, advarer Microsoft om, at Azure OpenAI kan returnere en meget lang Retry-After, i Microsofts eksempel et døgn, og anbefaler circuit breaker-regler.
python
from openai import OpenAI

# AZURE_V1_URL er https://<ressource>
# .openai.azure.com/openai/v1/
client = OpenAI(
    base_url=AZURE_V1_URL,
    api_key=AZURE_KEY,
    max_retries=5,  # default 2
)

chat = client.chat.completions
raw = chat.with_raw_response.create(
    model="YOUR-DEPLOYMENT",
    messages=messages,
)
h = raw.headers
print(h["x-ratelimit-remaining-tokens"])
reply = raw.parse()

Sådan anmoder I om mere kvote

  1. Åbn Manage og derefter Quota i Foundry-portalen. Fanen Token per minute viser, hvad hver model og region har, og hvad der er i brug.
  2. Flyt først TPM mellem jeres egne udrulninger. Ændringer gælder efter ca. 15 minutter.
  3. Vælg Request quota, eller brug formularen til kvoteanmodning. Den dækker Azure OpenAI, modeller solgt af Azure og Anthropics Claude-modeller.
  4. Vis reelt forbrug. Microsoft prioriterer kunder, der aktivt bruger deres nuværende kvote, og andre anmodninger kan blive afvist.
  5. En godkendt forhøjelse tilføjer kvote uden at ændre jeres tier. Free-abonnementer kan ikke anmode om forhøjelse.

Provisioneret kapacitet (PTU)

Fakta om provisioneret kapacitet
EmneDetalje
Hvad I fårDedikeret kapacitet, faktureret uanset om der kommer forespørgsler
Mindste størrelse15 PTU i trin på 5 ved Global og Data Zone Provisioned; ved Regional Provisioned 50 i trin på 50 for gpt-5.5, gpt-5.4, gpt-4.1 og o3 og 25 i trin på 25 for gpt-6.1-sol
Kapacitet pr. PTUInput-tokens pr. minut pr. PTU: 1.200 for gpt-5.5, 2.400 for gpt-5.4, 3.000 for gpt-6.1-sol og gpt-4.1
FaktureringPr. time pr. PTU fra oprettelse til sletning; Azure Reservations for 1 måned eller 1 år sænker prisen
KapacitetPTU-kvote garanterer ikke kapacitet, og det gør en reservation heller ikke: udrul først, reserver bagefter
Omkostningsestimat pr. forespørgselPrompt-tokens minus cachede tokens plus max_tokens, korrigeret når forespørgslen slutter
OverløbOverskud kan gå til en standardudrulning, altid eller pr. forespørgsel med x-ms-spillover-deployment
PTU-kvoten gælder pr. abonnement, region og udrulningstype og er ikke bundet til én model. Godkendelse kan tage flere dage.

Udrulningstyper og hvor behandlingen sker

Udrulningstyper i Azure OpenAI
UdrulningstypeHvor prompts behandlesKvote
Global Standard og Global ProvisionedI enhver Azure-regionHøjeste standardværdier
Data Zone Standard og Data Zone ProvisionedInden for datazonen USA, EU eller APACLavere end Global
Standard og Regional ProvisionedI den valgte geografiPr. region
Global BatchI enhver Azure-region, mål på 24 timer, 50 % billigereTokens i kø
Claude i Foundry kører på Global Standard eller på Data Zone Standard kun i USA; Microsoft angiver ingen EU-datazone for Claude, og Sweden Central er den eneste europæiske region for Claude på Global Standard.

Fordeling på flere udbydere

Ved vedvarende 429 anbefaler Microsoft selv at fordele forespørgsler på flere udrulninger eller regioner. Et skridt videre betyder det mere end én udbyder: Når et abonnement løber tør for kvote, står den samme eller en lige så stærk model klar et andet sted.

Med Standard Compute er jeres Azure-abonnement ikke længere den eneste vej, og der er ingen regional kvote at ansøge om: hver nøgle kører, til dens månedsbudget er brugt. GPT-6.1 og GPT-5.6 kører i Microsoft Azures EU-datazone, Claude betjenes af flere clouds, og samme API når Gemini og åbne modeller som GLM, DeepSeek og MiniMax. Går en udbyder ned, skifter jeres forespørgsel automatisk til en anden godkendt udbyder af samme model, uden at forlade jeres regions- eller udbyderregler.

Med en Europa-regel for virksomheden, et team eller en enkelt nøgle betjenes hver forespørgsel, også gentagelser og fallbacks, kun af godkendte europæiske inferens-endpoints. Medarbejdere logger ind i Claude Desktop og Claude Code med deres Microsoft-arbejdskonto gennem vores EU-gateway, og adgangen følger jeres Entra-grupper via SCIM-provisionering.

python
from openai import OpenAI

client = OpenAI(
    base_url="https://api.stdcmpt.com/v1",
    api_key=STANDARD_COMPUTE_KEY,
)

# "standardcompute" sender hvert trin til den
# billigste model, der kan klare det.
# For at låse Claude fast:
# model="anthropic/claude-sonnet-5.5"
client.chat.completions.create(
    model="standardcompute",
    messages=messages,
)

Om kvoter på Bedrock, se AWS Bedrock Claude kvoter. Hvordan Standard Compute fungerer for virksomheder, står på AI-gateway til virksomheder.

Sæt jeres team på Standard Compute

Opret en virksomhedskonto, inviter teamet, og giv hver person og hver applikation sin egen nøgle.

Opret en virksomhedskontoStandard Compute til virksomheder

Ofte stillede spørgsmål

Vi rammer hele tiden quota på Azure OpenAI. Er der et alternativ, som stadig holder data i EU?

Standard Compute leverer GPT-6.1 og GPT-5.6 i Microsoft Azures EU-datazone sammen med Claude og open source-modeller, uden en regional kvote, I skal ansøge om: hver nøgle kører, til dens månedsbudget er brugt. Med en Europa-regel betjenes hver forespørgsel, også gentagelser og fallbacks, kun af godkendte europæiske inferens-endpoints, og kan ingen af dem betjene den, afvises den, før jeres prompt sendes.

Hvad er rate limits på Azure OpenAI?

Kvoten gælder pr. abonnement, region, model og udrulningstype i tokens pr. minut, og forespørgsler pr. minut følger af den. På Tier 1 får gpt-6.1-sol 250.000 TPM på Global Standard og 100.000 TPM på Data Zone Standard; Tier 6 når 15.000.000 TPM på Global Standard.

Hvorfor får vi 429-fejl, når forbruget ligger under kvoten?

RPM tjekkes i vinduer på 1 eller 10 sekunder, så spidser begrænses, selv om minuttet ser fint ud. Afviste forespørgsler tæller også, og Microsoft kan midlertidigt sænke den effektive grænse på delt standardkapacitet; sammenlign x-ratelimit-limit-tokens med den TPM, I har sat.

Hvordan øger vi vores Azure OpenAI-kvote?

Fordel først TPM om mellem jeres udrulninger, vælg derefter Request quota på Quota-siden i Foundry-portalen, eller brug aka.ms/oai/stuquotarequest. Microsoft prioriterer abonnementer, der allerede bruger deres kvote, og Free-abonnementer kan ikke anmode om forhøjelse.

Hvornår skal vi købe provisioneret kapacitet (PTU)?

Ved stabil, latensfølsom belastning. PTU'er giver dedikeret kapacitet, faktureret pr. time, brugt eller ej, fra 15 PTU ved Global- og Data Zone-udrulninger, med reservationer for 1 måned eller 1 år som rabat. Kvote og reservation garanterer ikke kapacitet, så udrul, før I reserverer.

Kan vi bruge Claude i Azure AI Foundry i EU?

Microsoft tilbyder Claude på Global Standard eller på Data Zone Standard kun i USA, uden EU-datazone. Hvis Claude kun må betjenes af europæiske endpoints, sender Standard Computes Europa-regel Claude til godkendte europæiske inferens-endpoints og afviser forespørgslen, før noget sendes, hvis ingen kvalificerer sig.

Kilder (kontrolleret 9. november 2026)

  1. Azure OpenAI in Microsoft Foundry Models quotas and limits (engelsk)learn.microsoft.com
  2. Manage Azure OpenAI quota (engelsk)learn.microsoft.com
  3. Provisioned throughput for Foundry Models (engelsk)learn.microsoft.com
  4. Determine PTU sizing for a workload (engelsk)learn.microsoft.com
  5. Operate provisioned throughput deployments (engelsk)learn.microsoft.com
  6. Deployment types in Microsoft Foundry Models (engelsk)learn.microsoft.com
  7. Claude models in Microsoft Foundry (engelsk)learn.microsoft.com
  8. Claude model quotas and rate limits (engelsk)learn.microsoft.com
  9. Azure API Management backends (engelsk)learn.microsoft.com