Claude op Amazon Bedrock: quota, throttling en verhogingen

Wat Claude op Amazon Bedrock begrenst, welke standaardquota AWS publiceert, waarom throttling eerder begint dan de factuur doet vermoeden, en hoe u meer doorvoer krijgt. Elk AWS-feit op deze pagina komt uit de documentatie van AWS, hieronder gelinkt.

Bedrijfsaccount aanmakenof mail naar contact@standardcompute.com

Standard Compute · Bronnen gecontroleerd op 9 november 2026

In het kort

Amazon Bedrock begrenst Claude in tokens per minuut, per model en per regio, met input- en outputtokens samen. Sommige modellen hebben ook een quotum voor verzoeken per minuut, en elk account heeft een daglimiet in tokens.

Elke outputtoken van Claude telt, afhankelijk van het model, 5, 10 of 15 keer mee, en de volledige max_tokens wordt bij de start van het verzoek gereserveerd. Daardoor begint throttling ruim voordat uw gefactureerde tokens het quotum halen.

Een ThrottlingException is HTTP 429 en betekent dat uw account een Bedrock-quotum heeft overschreden. AWS adviseert exponentiële backoff met jitter, een quotaverhoging, en Reserved Tier of Provisioned Throughput bij aanhoudende belasting.

Grotere verhogingen gaan naar AWS Support. AWS geeft voorrang aan accounts die hun quotum al opmaken en kan andere aanvragen weigeren.

Op Standard Compute wordt Claude door meerdere clouds bediend, dus het quotum of de storing van één provider houdt uw werk niet tegen: een gethrottled of mislukt verzoek gaat automatisch naar een andere provider van hetzelfde model.

De quota die voor Claude gelden

Amazon Bedrock-quota op het endpoint bedrock-runtime
Quotum (AWS-naam)BereikWat het telt
Cross-Region InvokeModel tokens per minutePer model, per regioInput- en outputtokens samen, voor aanroepen via een cross-region inference-profiel
On-demand InvokeModel tokens per minutePer model, per regioInput- en outputtokens samen, voor on-demand aanroepen in één regio
InvokeModel requests per minutePer model, per regioVerzoeken per minuut, voor modellen die dit quotum hebben; Claude Opus 4.7 en 4.8 hebben het niet
Cross-Model Max Tokens Per DayPer account, per regioTokens per dag over alle ondersteunde modellen

Ondanks de namen gelden deze quota voor elke inferentie-API die het model op bedrock-runtime aanroept, ook Converse, Responses en Chat Completions. Het nieuwere endpoint bedrock-mantle telt apart, met eigen quota voor input- en outputtokens per minuut en zonder quotum voor verzoeken per minuut.

Gepubliceerde standaardwaarden voor de huidige Claude-modellen

Standaard Bedrock-quota voor Claude, per ondersteunde regio
ModelCross-region, tokens per minuutGlobaal cross-region, tokens per minuutCross-region, verzoeken per minuut
Claude Opus 5.530.000.00030.000.000Niet gepubliceerd
Claude Opus 530.000.00030.000.000Niet gepubliceerd
Claude Opus 4.830.000.00030.000.000Geen RPM-quotum
Claude Sonnet 5.56.000.0006.000.000Niet gepubliceerd
Claude Sonnet 56.000.0006.000.000Niet gepubliceerd
Claude Sonnet 4.66.000.0006.000.00010.000
Claude Haiku 5.510.000.00010.000.000Niet gepubliceerd
Claude Haiku 4.55.000.0005.000.00010.000
Uit de tabel met Amazon Bedrock-quota in de AWS General Reference; alle waarden hierboven zijn aanpasbaar. Cross-Model Max Tokens Per Day staat standaard op 700.000.000 en is niet aanpasbaar. Volgens AWS kunnen de quota van uw account lager zijn, afhankelijk van regio, leeftijd van het account en gebruiks- en betaalgeschiedenis. Service Quotas toont uw echte waarden.

Waarom het quotum sneller daalt dan de factuur

Bedrock rekent outputtokens met een burndown-factor om naar quotaverbruik. AWS noemt 10 keer voor Claude Opus 5.5, Sonnet 5, Opus 5 en Fable 5.1, 15 keer voor Claude-modellen van versie 4.8 en 5 keer voor versie 4.7 en ouder. Voor Sonnet 5.5 en Haiku 5.5 noemt de pagina geen eigen factor. Gefactureerd worden alleen de werkelijk gebruikte tokens.

Het quotum wordt ook vooraf belast. Bij de start van een verzoek trekt Bedrock de inputtokens plus de volledige max_tokens af, en geeft het ongebruikte deel aan het eind terug. Cachereads tellen niet mee. De formule van AWS toegepast op één verzoek aan Claude Opus 5.5:

quotaberekening, Claude Opus 5.5 (10x output-burndown)
inputtokens             20.000
max_tokens              32.000
gegenereerde output      2.000

gereserveerd bij start  52.000
  = input + max_tokens
belast aan het eind     40.000
  = input + output x 10
gefactureerde tokens    22.000
  = input + output

max_tokens dicht bij de werkelijke outputgrootte zetten is de goedkoopste manier om meer gelijktijdige verzoeken in hetzelfde quotum te passen.

Cross-region inference

Cross-region inference stuurt een verzoek via een inference-profiel, en Bedrock kiest de regio die het bedient. Aanroepen via een profiel gebruiken het cross-region quotum van het model, los van het on-demand quotum voor aanroepen in één regio.

Geografische en globale cross-region inference
ProfielWaar verzoeken draaienPrijs
Geografisch (US, EU, APAC)In de regio's van die geografie die in het profiel staanStandaardprijs
GlobaalIn elke ondersteunde commerciële AWS-regioVolgens AWS ongeveer 10% goedkoper
AWS rekent geen extra routeringskosten en logt de bedienende regio in CloudTrail als additionalEventData.inferenceRegion. Inference-profielen ondersteunen geen Provisioned Throughput.

ThrottlingException en verwante fouten

Throttling- en capaciteitsfouten van Bedrock
FoutHTTPBetekenisAdvies van AWS
ThrottlingException429Het verzoek overschreed de Bedrock-quota van uw accountOpnieuw proberen met exponentiële backoff en jitter, quota controleren, verhoging aanvragen, of Reserved Tier en Provisioned Throughput voor aanhoudende belasting
ModelNotReadyException429Sommige runtime-operaties geven hiervoor ook 429Kijk naar het fouttype, niet alleen naar de statuscode
ServiceUnavailable503Tijdelijk capaciteitstekort, los van uw quotumWachten en opnieuw proberen; bij aanhouden van regio wisselen of cross-region inference gebruiken
overloaded_error529Het model heeft op dat moment te weinig capaciteitRetry-After respecteren, geen gesynchroniseerde retries, cross-region inference gebruiken

Het voorbeeldbudget van AWS is zes pogingen in totaal, het eerste verzoek plus vijf retries. In boto3:

python
import boto3
from botocore.config import Config

config = Config(retries={
    "total_max_attempts": 6,
    "mode": "standard",
})
client = boto3.client(
    "bedrock-runtime", config=config
)

Een quotaverhoging aanvragen

  1. Open Service Quotas, kies Amazon Bedrock en controleer de waarden van uw account voor het model en de regio die u aanroept.
  2. Controleer eerst de levenscyclus van het model. AWS verhoogt geen quota voor Legacy- of Deprecated-modellen.
  3. Vraag de verhoging aan op "Cross-Region InvokeModel tokens per minute" voor het model. AWS Support biedt dan aan om in dezelfde case ook de on-demand tokens per minuut en per dag te verhogen.
  4. Laat echt gebruik zien. Volgens AWS gaat voorrang naar klanten wier verkeer het bestaande quotum al opmaakt, en kunnen andere aanvragen worden geweigerd. Kleine verhogingen worden vaak automatisch goedgekeurd; grote beoordeelt AWS Support.
  5. Voor het endpoint bedrock-mantle geldt een eigen procedure.
terminal
# Toegepaste Claude-quota, huidige regio
aws service-quotas list-service-quotas \
  --service-code bedrock \
  --query "Quotas[?contains(QuotaName,
    'Claude Sonnet 5.5')].[QuotaName,Value]" \
  --output table

# Verhoging aanvragen met de quotacode
aws service-quotas \
  request-service-quota-increase \
  --service-code bedrock \
  --quota-code L-XXXXXXXX \
  --desired-value 12000000

Provisioned Throughput en service tiers

Capaciteitsopties van Bedrock naast on-demand
OptieWat u krijgtVoorwaarden
Provisioned ThroughputModeleenheden met elk een vaste doorvoer aan input- en outputtokens per minuut, per uur gefactureerdZonder verplichting, 1 maand of 6 maanden. Doorvoer en prijs per eenheid via uw AWS account manager
Reserved TierGereserveerde input- en outputtokens per minuut, overloop naar Standard, beschikbaarheidsdoel van 99,5%1 of 3 maanden; minstens 100.000 input- en 10.000 outputtokens per minuut; via uw AWS-accountteam
Priority TierVerzoeken gaan voor Standard en Flex, tegen een meerprijsGeen reservering; deelt het on-demand quotum
Flex TierKorting voor werk dat langere verwerking verdraagtGeen reservering; deelt het on-demand quotum
Ondersteuning verschilt per model en regio; de modelkaart in de Bedrock-documentatie noemt de tiers. Claude Code op Bedrock kiest de tier met ANTHROPIC_BEDROCK_SERVICE_TIER.

Meer halen uit het quotum dat u hebt

  • Zet max_tokens op de verwachte output, want de volledige waarde wordt bij de start van elk verzoek gereserveerd.
  • Gebruik prompt caching voor terugkerende context.
  • Begrens op tokens en gelijktijdigheid. AWS waarschuwt dat een limiet op alleen verzoeken per minuut niet beschermt als de verzoekgrootte verandert.
  • Schaal in stappen op en houd op elk niveau de percentages 429, 503 en 529 in de gaten.
  • Verplaats offline werk naar batch inference en latentietolerant werk naar de Flex Tier, waar het model die ondersteunt.

Voorbij het quotum van één account

Voor een beschikbaarheidsdoel raadt AWS zelf begrensde retries en fallback over meerdere regio's of modellen in uw applicatie aan. Een gateway doet dat werk voor u, over meerdere providers.

Met Standard Compute wordt uw Bedrock-account één van meerdere routes voor Claude, en hoeft u zelf geen Bedrock-quotum aan te vragen. Claude wordt bediend door Anthropic en de grote clouds, en dezelfde API bereikt GPT, Gemini en open modellen als GLM, DeepSeek en MiniMax. Elke stap gaat naar het goedkoopste model dat hem aankan, en naar de goedkoopste aanbieder die snel genoeg is.

Voor Claude in Europa stelt u een Europa-regel in voor het bedrijf, een team of één sleutel: elk verzoek, inclusief retries en fallbacks, wordt dan alleen bediend door goedgekeurde Europese inferentie-endpoints. Claude Opus 5.5, Sonnet 5.5 en Haiku 5.5 draaien in Europa op Google Vertex AI en Amazon Bedrock in Ierland. De verwerkersovereenkomst tekent u in het dashboard.

python
from openai import OpenAI

client = OpenAI(
    base_url="https://api.stdcmpt.com/v1",
    api_key=STANDARD_COMPUTE_KEY,
)

# "standardcompute" stuurt elke stap naar het
# goedkoopste model dat hem aankan.
# Om Claude vast te zetten:
# model="anthropic/claude-sonnet-5.5"
client.chat.completions.create(
    model="standardcompute",
    messages=messages,
)

Voor de quota van Azure OpenAI, zie Azure OpenAI quota. Hoe Standard Compute voor bedrijven werkt, staat op AI-gateway voor bedrijven.

Zet uw team op Standard Compute

Maak een bedrijfsaccount aan, nodig uw team uit en geef elke persoon en elke applicatie een eigen sleutel.

Bedrijfsaccount aanmakenStandard Compute voor bedrijven

Veelgestelde vragen

Bedrock geeft steeds throttling op Claude Sonnet en quota verhogen duurt eeuwig. Hoe lossen andere bedrijven dit op?

Binnen AWS: een globaal of EU-inference-profiel, `max_tokens` dicht bij de echte output, prompt caching, en een verhogingsaanvraag met echt gebruik, want AWS geeft voorrang aan accounts die hun quotum opmaken. Daarbuiten: via een gateway. Op Standard Compute wordt Claude door meerdere clouds bediend, dus het quotum of de storing van één provider houdt uw werk niet tegen, en u hoeft geen eigen Bedrock-quotum aan te vragen. Met een Europa-regel wordt Claude Sonnet 5.5 alleen bediend door goedgekeurde Europese endpoints: Google Vertex AI in Europa en Amazon Bedrock in Ierland.

Wat zijn de standaard Amazon Bedrock-quota voor Claude?

AWS publiceert per regio 30.000.000 tokens per minuut via cross-region inference voor Claude Opus 5.5, Opus 5 en Opus 4.8, 6.000.000 voor Sonnet 5.5, Sonnet 5 en Sonnet 4.6, en 10.000.000 voor Haiku 5.5. De waarden van uw account kunnen lager zijn; controleer Service Quotas.

Wat betekent ThrottlingException op Bedrock?

Uw account ging over een Bedrock-quotum voor dat model, zoals tokens per minuut. Controleer de toegepaste waarden in Service Quotas, probeer opnieuw met backoff en jitter, en vraag een verhoging aan als het verkeer stabiel is.

Waarom worden we gethrottled terwijl het verbruik onder het quotum lijkt te liggen?

Omdat outputtokens van Claude per model 5, 10 of 15 keer meetellen en Bedrock bij de start van elk verzoek de volledige max_tokens reserveert. Verlaag max_tokens en gebruik prompt caching; cachereads tellen niet mee.

Helpt cross-region inference tegen Bedrock-throttling?

Het gebruikt het cross-region quotum van het model, los van het on-demand quotum in één regio, en spreidt verzoeken over de regio's in het profiel. Dat helpt bij regionale capaciteitsfouten. Globale profielen zijn volgens AWS ongeveer 10% goedkoper dan geografische.

Moeten we Provisioned Throughput kopen voor Claude op Bedrock?

Alleen bij voorspelbare, aanhoudende belasting. Het wordt per uur per modeleenheid gefactureerd, zonder verplichting of voor 1 of 6 maanden, en werkt niet met inference-profielen. Het alternatief voor gereserveerde tokens per minuut is de Reserved Tier, vanaf 100.000 input- en 10.000 outputtokens per minuut, via uw AWS-accountteam.

Bronnen (gecontroleerd op 9 november 2026)

  1. Quotas for Amazon Bedrock (Engels)docs.aws.amazon.com
  2. Quotas for the bedrock-runtime endpoint (Engels)docs.aws.amazon.com
  3. How tokens are counted in Amazon Bedrock (Engels)docs.aws.amazon.com
  4. Amazon Bedrock service quotas, AWS General Reference (Engels)docs.aws.amazon.com
  5. Cross-Region inference (Engels)docs.aws.amazon.com
  6. Troubleshooting Amazon Bedrock API error codes (Engels)docs.aws.amazon.com
  7. Scaling and throughput best practices (Engels)docs.aws.amazon.com
  8. Provisioned Throughput (Engels)docs.aws.amazon.com
  9. Service tiers for inference (Engels)docs.aws.amazon.com
  10. Requesting a quota increase, Service Quotas (Engels)docs.aws.amazon.com
  11. Claude Code on Amazon Bedrock (Engels)code.claude.com