In het kort
Amazon Bedrock begrenst Claude in tokens per minuut, per model en per regio, met input- en outputtokens samen. Sommige modellen hebben ook een quotum voor verzoeken per minuut, en elk account heeft een daglimiet in tokens.
Elke outputtoken van Claude telt, afhankelijk van het model, 5, 10 of 15 keer mee, en de volledige max_tokens wordt bij de start van het verzoek gereserveerd. Daardoor begint throttling ruim voordat uw gefactureerde tokens het quotum halen.
Een ThrottlingException is HTTP 429 en betekent dat uw account een Bedrock-quotum heeft overschreden. AWS adviseert exponentiële backoff met jitter, een quotaverhoging, en Reserved Tier of Provisioned Throughput bij aanhoudende belasting.
Grotere verhogingen gaan naar AWS Support. AWS geeft voorrang aan accounts die hun quotum al opmaken en kan andere aanvragen weigeren.
Op Standard Compute wordt Claude door meerdere clouds bediend, dus het quotum of de storing van één provider houdt uw werk niet tegen: een gethrottled of mislukt verzoek gaat automatisch naar een andere provider van hetzelfde model.
De quota die voor Claude gelden
| Quotum (AWS-naam) | Bereik | Wat het telt |
|---|---|---|
Cross-Region InvokeModel tokens per minute | Per model, per regio | Input- en outputtokens samen, voor aanroepen via een cross-region inference-profiel |
On-demand InvokeModel tokens per minute | Per model, per regio | Input- en outputtokens samen, voor on-demand aanroepen in één regio |
InvokeModel requests per minute | Per model, per regio | Verzoeken per minuut, voor modellen die dit quotum hebben; Claude Opus 4.7 en 4.8 hebben het niet |
Cross-Model Max Tokens Per Day | Per account, per regio | Tokens per dag over alle ondersteunde modellen |
Ondanks de namen gelden deze quota voor elke inferentie-API die het model op bedrock-runtime aanroept, ook Converse, Responses en Chat Completions. Het nieuwere endpoint bedrock-mantle telt apart, met eigen quota voor input- en outputtokens per minuut en zonder quotum voor verzoeken per minuut.
Gepubliceerde standaardwaarden voor de huidige Claude-modellen
| Model | Cross-region, tokens per minuut | Globaal cross-region, tokens per minuut | Cross-region, verzoeken per minuut |
|---|---|---|---|
| Claude Opus 5.5 | 30.000.000 | 30.000.000 | Niet gepubliceerd |
| Claude Opus 5 | 30.000.000 | 30.000.000 | Niet gepubliceerd |
| Claude Opus 4.8 | 30.000.000 | 30.000.000 | Geen RPM-quotum |
| Claude Sonnet 5.5 | 6.000.000 | 6.000.000 | Niet gepubliceerd |
| Claude Sonnet 5 | 6.000.000 | 6.000.000 | Niet gepubliceerd |
| Claude Sonnet 4.6 | 6.000.000 | 6.000.000 | 10.000 |
| Claude Haiku 5.5 | 10.000.000 | 10.000.000 | Niet gepubliceerd |
| Claude Haiku 4.5 | 5.000.000 | 5.000.000 | 10.000 |
Waarom het quotum sneller daalt dan de factuur
Bedrock rekent outputtokens met een burndown-factor om naar quotaverbruik. AWS noemt 10 keer voor Claude Opus 5.5, Sonnet 5, Opus 5 en Fable 5.1, 15 keer voor Claude-modellen van versie 4.8 en 5 keer voor versie 4.7 en ouder. Voor Sonnet 5.5 en Haiku 5.5 noemt de pagina geen eigen factor. Gefactureerd worden alleen de werkelijk gebruikte tokens.
Het quotum wordt ook vooraf belast. Bij de start van een verzoek trekt Bedrock de inputtokens plus de volledige max_tokens af, en geeft het ongebruikte deel aan het eind terug. Cachereads tellen niet mee. De formule van AWS toegepast op één verzoek aan Claude Opus 5.5:
inputtokens 20.000
max_tokens 32.000
gegenereerde output 2.000
gereserveerd bij start 52.000
= input + max_tokens
belast aan het eind 40.000
= input + output x 10
gefactureerde tokens 22.000
= input + outputmax_tokens dicht bij de werkelijke outputgrootte zetten is de goedkoopste manier om meer gelijktijdige verzoeken in hetzelfde quotum te passen.
Cross-region inference
Cross-region inference stuurt een verzoek via een inference-profiel, en Bedrock kiest de regio die het bedient. Aanroepen via een profiel gebruiken het cross-region quotum van het model, los van het on-demand quotum voor aanroepen in één regio.
| Profiel | Waar verzoeken draaien | Prijs |
|---|---|---|
| Geografisch (US, EU, APAC) | In de regio's van die geografie die in het profiel staan | Standaardprijs |
| Globaal | In elke ondersteunde commerciële AWS-regio | Volgens AWS ongeveer 10% goedkoper |
ThrottlingException en verwante fouten
| Fout | HTTP | Betekenis | Advies van AWS |
|---|---|---|---|
| ThrottlingException | 429 | Het verzoek overschreed de Bedrock-quota van uw account | Opnieuw proberen met exponentiële backoff en jitter, quota controleren, verhoging aanvragen, of Reserved Tier en Provisioned Throughput voor aanhoudende belasting |
| ModelNotReadyException | 429 | Sommige runtime-operaties geven hiervoor ook 429 | Kijk naar het fouttype, niet alleen naar de statuscode |
| ServiceUnavailable | 503 | Tijdelijk capaciteitstekort, los van uw quotum | Wachten en opnieuw proberen; bij aanhouden van regio wisselen of cross-region inference gebruiken |
| overloaded_error | 529 | Het model heeft op dat moment te weinig capaciteit | Retry-After respecteren, geen gesynchroniseerde retries, cross-region inference gebruiken |
Het voorbeeldbudget van AWS is zes pogingen in totaal, het eerste verzoek plus vijf retries. In boto3:
import boto3
from botocore.config import Config
config = Config(retries={
"total_max_attempts": 6,
"mode": "standard",
})
client = boto3.client(
"bedrock-runtime", config=config
)Een quotaverhoging aanvragen
- Open Service Quotas, kies Amazon Bedrock en controleer de waarden van uw account voor het model en de regio die u aanroept.
- Controleer eerst de levenscyclus van het model. AWS verhoogt geen quota voor Legacy- of Deprecated-modellen.
- Vraag de verhoging aan op "Cross-Region InvokeModel tokens per minute" voor het model. AWS Support biedt dan aan om in dezelfde case ook de on-demand tokens per minuut en per dag te verhogen.
- Laat echt gebruik zien. Volgens AWS gaat voorrang naar klanten wier verkeer het bestaande quotum al opmaakt, en kunnen andere aanvragen worden geweigerd. Kleine verhogingen worden vaak automatisch goedgekeurd; grote beoordeelt AWS Support.
- Voor het endpoint
bedrock-mantlegeldt een eigen procedure.
# Toegepaste Claude-quota, huidige regio
aws service-quotas list-service-quotas \
--service-code bedrock \
--query "Quotas[?contains(QuotaName,
'Claude Sonnet 5.5')].[QuotaName,Value]" \
--output table
# Verhoging aanvragen met de quotacode
aws service-quotas \
request-service-quota-increase \
--service-code bedrock \
--quota-code L-XXXXXXXX \
--desired-value 12000000Provisioned Throughput en service tiers
| Optie | Wat u krijgt | Voorwaarden |
|---|---|---|
| Provisioned Throughput | Modeleenheden met elk een vaste doorvoer aan input- en outputtokens per minuut, per uur gefactureerd | Zonder verplichting, 1 maand of 6 maanden. Doorvoer en prijs per eenheid via uw AWS account manager |
| Reserved Tier | Gereserveerde input- en outputtokens per minuut, overloop naar Standard, beschikbaarheidsdoel van 99,5% | 1 of 3 maanden; minstens 100.000 input- en 10.000 outputtokens per minuut; via uw AWS-accountteam |
| Priority Tier | Verzoeken gaan voor Standard en Flex, tegen een meerprijs | Geen reservering; deelt het on-demand quotum |
| Flex Tier | Korting voor werk dat langere verwerking verdraagt | Geen reservering; deelt het on-demand quotum |
Meer halen uit het quotum dat u hebt
- Zet
max_tokensop de verwachte output, want de volledige waarde wordt bij de start van elk verzoek gereserveerd. - Gebruik prompt caching voor terugkerende context.
- Begrens op tokens en gelijktijdigheid. AWS waarschuwt dat een limiet op alleen verzoeken per minuut niet beschermt als de verzoekgrootte verandert.
- Schaal in stappen op en houd op elk niveau de percentages 429, 503 en 529 in de gaten.
- Verplaats offline werk naar batch inference en latentietolerant werk naar de Flex Tier, waar het model die ondersteunt.
Voorbij het quotum van één account
Voor een beschikbaarheidsdoel raadt AWS zelf begrensde retries en fallback over meerdere regio's of modellen in uw applicatie aan. Een gateway doet dat werk voor u, over meerdere providers.
Met Standard Compute wordt uw Bedrock-account één van meerdere routes voor Claude, en hoeft u zelf geen Bedrock-quotum aan te vragen. Claude wordt bediend door Anthropic en de grote clouds, en dezelfde API bereikt GPT, Gemini en open modellen als GLM, DeepSeek en MiniMax. Elke stap gaat naar het goedkoopste model dat hem aankan, en naar de goedkoopste aanbieder die snel genoeg is.
Voor Claude in Europa stelt u een Europa-regel in voor het bedrijf, een team of één sleutel: elk verzoek, inclusief retries en fallbacks, wordt dan alleen bediend door goedgekeurde Europese inferentie-endpoints. Claude Opus 5.5, Sonnet 5.5 en Haiku 5.5 draaien in Europa op Google Vertex AI en Amazon Bedrock in Ierland. De verwerkersovereenkomst tekent u in het dashboard.
from openai import OpenAI
client = OpenAI(
base_url="https://api.stdcmpt.com/v1",
api_key=STANDARD_COMPUTE_KEY,
)
# "standardcompute" stuurt elke stap naar het
# goedkoopste model dat hem aankan.
# Om Claude vast te zetten:
# model="anthropic/claude-sonnet-5.5"
client.chat.completions.create(
model="standardcompute",
messages=messages,
)Voor de quota van Azure OpenAI, zie Azure OpenAI quota. Hoe Standard Compute voor bedrijven werkt, staat op AI-gateway voor bedrijven.
Zet uw team op Standard Compute
Maak een bedrijfsaccount aan, nodig uw team uit en geef elke persoon en elke applicatie een eigen sleutel.
Veelgestelde vragen
Bedrock geeft steeds throttling op Claude Sonnet en quota verhogen duurt eeuwig. Hoe lossen andere bedrijven dit op?
Binnen AWS: een globaal of EU-inference-profiel, `max_tokens` dicht bij de echte output, prompt caching, en een verhogingsaanvraag met echt gebruik, want AWS geeft voorrang aan accounts die hun quotum opmaken. Daarbuiten: via een gateway. Op Standard Compute wordt Claude door meerdere clouds bediend, dus het quotum of de storing van één provider houdt uw werk niet tegen, en u hoeft geen eigen Bedrock-quotum aan te vragen. Met een Europa-regel wordt Claude Sonnet 5.5 alleen bediend door goedgekeurde Europese endpoints: Google Vertex AI in Europa en Amazon Bedrock in Ierland.
Wat zijn de standaard Amazon Bedrock-quota voor Claude?
AWS publiceert per regio 30.000.000 tokens per minuut via cross-region inference voor Claude Opus 5.5, Opus 5 en Opus 4.8, 6.000.000 voor Sonnet 5.5, Sonnet 5 en Sonnet 4.6, en 10.000.000 voor Haiku 5.5. De waarden van uw account kunnen lager zijn; controleer Service Quotas.
Wat betekent ThrottlingException op Bedrock?
Uw account ging over een Bedrock-quotum voor dat model, zoals tokens per minuut. Controleer de toegepaste waarden in Service Quotas, probeer opnieuw met backoff en jitter, en vraag een verhoging aan als het verkeer stabiel is.
Waarom worden we gethrottled terwijl het verbruik onder het quotum lijkt te liggen?
Omdat outputtokens van Claude per model 5, 10 of 15 keer meetellen en Bedrock bij de start van elk verzoek de volledige max_tokens reserveert. Verlaag max_tokens en gebruik prompt caching; cachereads tellen niet mee.
Helpt cross-region inference tegen Bedrock-throttling?
Het gebruikt het cross-region quotum van het model, los van het on-demand quotum in één regio, en spreidt verzoeken over de regio's in het profiel. Dat helpt bij regionale capaciteitsfouten. Globale profielen zijn volgens AWS ongeveer 10% goedkoper dan geografische.
Moeten we Provisioned Throughput kopen voor Claude op Bedrock?
Alleen bij voorspelbare, aanhoudende belasting. Het wordt per uur per modeleenheid gefactureerd, zonder verplichting of voor 1 of 6 maanden, en werkt niet met inference-profielen. Het alternatief voor gereserveerde tokens per minuut is de Reserved Tier, vanaf 100.000 input- en 10.000 outputtokens per minuut, via uw AWS-accountteam.
Bronnen (gecontroleerd op 9 november 2026)
- Quotas for Amazon Bedrock (Engels)docs.aws.amazon.com
- Quotas for the bedrock-runtime endpoint (Engels)docs.aws.amazon.com
- How tokens are counted in Amazon Bedrock (Engels)docs.aws.amazon.com
- Amazon Bedrock service quotas, AWS General Reference (Engels)docs.aws.amazon.com
- Cross-Region inference (Engels)docs.aws.amazon.com
- Troubleshooting Amazon Bedrock API error codes (Engels)docs.aws.amazon.com
- Scaling and throughput best practices (Engels)docs.aws.amazon.com
- Provisioned Throughput (Engels)docs.aws.amazon.com
- Service tiers for inference (Engels)docs.aws.amazon.com
- Requesting a quota increase, Service Quotas (Engels)docs.aws.amazon.com
- Claude Code on Amazon Bedrock (Engels)code.claude.com