Das Wichtigste in Kürze
Amazon Bedrock begrenzt Claude in Tokens pro Minute, je Modell und je Region. Input- und Output-Tokens zählen zusammen, einige Modelle haben zusätzlich ein Kontingent für Anfragen pro Minute, und jedes Konto hat eine Tagesgrenze für Tokens.
Jeder Output-Token von Claude zählt je nach Modell 5-, 10- oder 15-fach gegen das Kontingent, und der volle max_tokens-Wert wird beim Start der Anfrage reserviert. Deshalb beginnt das Throttling lange bevor die abgerechneten Tokens das Kontingent erreichen.
Eine ThrottlingException ist HTTP 429 und bedeutet, dass Ihr Konto ein Bedrock-Kontingent überschritten hat. AWS empfiehlt exponentielles Backoff mit Jitter, eine Kontingenterhöhung und für Dauerlast Reserved Tier oder Provisioned Throughput.
Größere Erhöhungen prüft der AWS Support. Vorrang haben Konten, die ihr bestehendes Kontingent bereits ausschöpfen; andere Anfragen können abgelehnt werden.
Auf Standard Compute wird Claude über mehrere Clouds bedient, sodass das Kontingent oder ein Ausfall bei einem Anbieter Ihre Arbeit nicht stoppt: Eine gedrosselte oder fehlgeschlagene Anfrage geht automatisch an einen anderen Anbieter desselben Modells.
Diese Kontingente gelten für Claude
| Kontingent (AWS-Name) | Geltungsbereich | Zählt |
|---|---|---|
Cross-Region InvokeModel tokens per minute | Je Modell, je Region | Input- und Output-Tokens zusammen, für Aufrufe über ein regionsübergreifendes Inferenzprofil |
On-demand InvokeModel tokens per minute | Je Modell, je Region | Input- und Output-Tokens zusammen, für On-Demand-Aufrufe in einer Region |
InvokeModel requests per minute | Je Modell, je Region | Anfragen pro Minute, für Modelle mit diesem Kontingent; Claude Opus 4.7 und 4.8 haben keins |
Cross-Model Max Tokens Per Day | Je Konto, je Region | Tokens pro Tag über alle unterstützten Modelle |
Trotz der Namen gelten diese Kontingente für jede Inferenz-API, die das Modell über bedrock-runtime aufruft, auch Converse, Responses und Chat Completions. Der neuere Endpunkt bedrock-mantle wird getrennt gezählt, mit eigenen Kontingenten für Input- und Output-Tokens pro Minute und ohne Kontingent für Anfragen pro Minute.
Veröffentlichte Standardwerte für aktuelle Claude-Modelle
| Modell | Regionsübergreifend, Tokens pro Minute | Global regionsübergreifend, Tokens pro Minute | Regionsübergreifend, Anfragen pro Minute |
|---|---|---|---|
| Claude Opus 5.5 | 30.000.000 | 30.000.000 | Nicht veröffentlicht |
| Claude Opus 5 | 30.000.000 | 30.000.000 | Nicht veröffentlicht |
| Claude Opus 4.8 | 30.000.000 | 30.000.000 | Kein Kontingent für Anfragen pro Minute |
| Claude Sonnet 5.5 | 6.000.000 | 6.000.000 | Nicht veröffentlicht |
| Claude Sonnet 5 | 6.000.000 | 6.000.000 | Nicht veröffentlicht |
| Claude Sonnet 4.6 | 6.000.000 | 6.000.000 | 10.000 |
| Claude Haiku 5.5 | 10.000.000 | 10.000.000 | Nicht veröffentlicht |
| Claude Haiku 4.5 | 5.000.000 | 5.000.000 | 10.000 |
Warum das Kontingent schneller sinkt als die Rechnung
Bedrock rechnet Output-Tokens mit einem festen Faktor (Burndown) in Kontingentverbrauch um. AWS nennt 10-fach für Claude Opus 5.5, Sonnet 5, Opus 5 und Fable 5.1, 15-fach für Claude-Modelle der Version 4.8 und 5-fach für Version 4.7 und älter. Für Sonnet 5.5 und Haiku 5.5 nennt die Seite keine eigene Rate. Abgerechnet werden nur die tatsächlich genutzten Tokens.
Das Kontingent wird außerdem im Voraus belastet. Beim Start einer Anfrage zieht Bedrock die Input-Tokens plus den vollen max_tokens-Wert ab und gibt den ungenutzten Teil am Ende zurück. Cache-Lesezugriffe zählen nicht. So sieht die Formel von AWS für eine Anfrage an Claude Opus 5.5 aus:
Input-Tokens 20.000
max_tokens 32.000
erzeugter Output 2.000
reserviert beim Start 52.000
= input + max_tokens
belastet am Ende 40.000
= input + output x 10
abgerechnete Tokens 22.000
= input + outputmax_tokens nah an die tatsächliche Ausgabegröße zu setzen, ist der günstigste Weg, mehr parallele Anfragen im selben Kontingent unterzubringen.
Regionsübergreifende Inferenz
Regionsübergreifende Inferenz schickt eine Anfrage über ein Inferenzprofil, und Bedrock wählt die Region, die sie bedient. Aufrufe über ein Profil nutzen das regionsübergreifende Kontingent des Modells, das vom On-Demand-Kontingent für Aufrufe in einer Region getrennt ist.
| Profil | Wo Anfragen laufen | Preis |
|---|---|---|
| Geografisch (US, EU, APAC) | In den Regionen dieser Geografie, die im Profil stehen | Standardpreis |
| Global | In jeder unterstützten kommerziellen AWS-Region | Laut AWS etwa 10 % günstiger |
ThrottlingException und verwandte Fehler
| Fehler | HTTP | Bedeutung | Empfehlung von AWS |
|---|---|---|---|
| ThrottlingException | 429 | Die Anfrage hat die Bedrock-Kontingente Ihres Kontos überschritten | Wiederholen mit exponentiellem Backoff und Jitter, Kontingente prüfen, Erhöhung beantragen oder für Dauerlast Reserved Tier oder Provisioned Throughput |
| ModelNotReadyException | 429 | Einige Laufzeitoperationen geben auch dafür 429 zurück | Den Fehlertyp auswerten, nicht nur den Statuscode |
| ServiceUnavailable | 503 | Vorübergehender Kapazitätsengpass, unabhängig von Ihrem Kontingent | Zurückhalten und wiederholen; bei Dauer Region wechseln oder regionsübergreifende Inferenz nutzen |
| overloaded_error | 529 | Dem Modell fehlt gerade Kapazität | Retry-After beachten, keine synchronen Wiederholungen, regionsübergreifende Inferenz nutzen |
AWS nennt als Beispiel sechs Versuche insgesamt, die erste Anfrage plus fünf Wiederholungen. In boto3:
import boto3
from botocore.config import Config
config = Config(retries={
"total_max_attempts": 6,
"mode": "standard",
})
client = boto3.client(
"bedrock-runtime", config=config
)So beantragen Sie eine Kontingenterhöhung
- Öffnen Sie Service Quotas, wählen Sie Amazon Bedrock und prüfen Sie die Werte Ihres Kontos für das Modell und die Region, die Sie aufrufen.
- Prüfen Sie zuerst den Lebenszyklus des Modells. Für veraltete (Legacy) oder abgekündigte (Deprecated) Modelle gewährt AWS keine Erhöhungen.
- Beantragen Sie die Erhöhung für "Cross-Region InvokeModel tokens per minute" des Modells. Der AWS Support bietet dann an, im selben Fall auch die On-Demand-Tokens pro Minute und die Tokens pro Tag anzuheben.
- Belegen Sie Ihre tatsächliche Nutzung. Laut AWS haben Kunden Vorrang, deren Datenverkehr das bestehende Kontingent bereits ausschöpft; andere Anfragen können abgelehnt werden. Kleinere Erhöhungen werden oft automatisch genehmigt, größere prüft der AWS Support.
- Für den Endpunkt
bedrock-mantlegilt ein eigenes Verfahren.
# Claude-Kontingente des Kontos, aktuelle Region
aws service-quotas list-service-quotas \
--service-code bedrock \
--query "Quotas[?contains(QuotaName,
'Claude Sonnet 5.5')].[QuotaName,Value]" \
--output table
# Erhöhung mit dem Kontingentcode beantragen
aws service-quotas \
request-service-quota-increase \
--service-code bedrock \
--quota-code L-XXXXXXXX \
--desired-value 12000000Provisioned Throughput und Service-Tiers
| Option | Was Sie bekommen | Bedingungen |
|---|---|---|
| Provisioned Throughput | Modelleinheiten mit festem Input- und Output-Durchsatz pro Minute, stündlich abgerechnet | Ohne Bindung, 1 Monat oder 6 Monate. Durchsatz und Preis je Einheit nennt Ihr AWS Account Manager |
| Reserved Tier | Reservierte Input- und Output-Tokens pro Minute, Überlauf in Standard, Verfügbarkeitsziel 99,5 % | 1 oder 3 Monate; mindestens 100.000 Input- und 10.000 Output-Tokens pro Minute; über Ihr AWS Account Team |
| Priority Tier | Anfragen werden vor Standard und Flex bedient, mit Aufpreis | Keine Reservierung; teilt das On-Demand-Kontingent |
| Flex Tier | Rabatt für Aufgaben, die eine längere Bearbeitungszeit vertragen | Keine Reservierung; teilt das On-Demand-Kontingent |
Mehr aus dem vorhandenen Kontingent holen
- Setzen Sie
max_tokensauf die erwartete Ausgabe, denn der volle Wert wird beim Start jeder Anfrage reserviert. - Nutzen Sie Prompt Caching für wiederkehrenden Kontext.
- Begrenzen Sie nach Tokens und Parallelität. AWS warnt, dass ein Limit nur auf Anfragen pro Minute nicht schützt, wenn sich die Anfragegröße ändert.
- Fahren Sie die Last stufenweise hoch und beobachten Sie auf jeder Stufe die Raten für 429, 503 und 529.
- Verlagern Sie Offline-Arbeit in Batch-Inferenz und latenztolerante Arbeit in den Flex Tier, wo das Modell ihn unterstützt.
Über das Kontingent eines Kontos hinaus
Für ein Verfügbarkeitsziel rät AWS selbst zu begrenzten Wiederholungen und zu Fallbacks über mehrere Regionen oder Modelle in Ihrer Anwendung. Ein Gateway übernimmt diese Arbeit, über mehrere Anbieter hinweg.
Mit Standard Compute wird Ihr Bedrock-Konto zu einem von mehreren Wegen für Claude, und Sie müssen kein eigenes AWS-Kontingent beantragen. Claude wird über Anthropic und die großen Clouds bedient, und dieselbe API erreicht GPT, Gemini und offene Modelle wie GLM, DeepSeek und MiniMax. Jeder Schritt geht an das günstigste Modell, das ihn erledigen kann, und an den günstigsten Anbieter, der schnell genug ist.
Für Claude in Europa legen Sie eine Europa-Regel für das Unternehmen, ein Team oder einen einzelnen Schlüssel fest: Jede Anfrage, einschließlich Wiederholungen und Fallbacks, wird dann nur von freigegebenen europäischen Inferenz-Endpunkten bedient. Claude Opus 5.5, Sonnet 5.5 und Haiku 5.5 laufen in Europa auf Google Vertex AI und Amazon Bedrock in Irland. Den AVV unterschreiben Sie im Dashboard.
from openai import OpenAI
client = OpenAI(
base_url="https://api.stdcmpt.com/v1",
api_key=STANDARD_COMPUTE_KEY,
)
# "standardcompute" schickt jeden Schritt an das
# günstigste Modell, das ihn erledigen kann.
# Um Claude fest zu wählen:
# model="anthropic/claude-sonnet-5.5"
client.chat.completions.create(
model="standardcompute",
messages=messages,
)Für die Kontingente von Azure OpenAI siehe Azure OpenAI Kontingente. Wie Standard Compute für Unternehmen funktioniert, steht auf KI-Gateway für Unternehmen.
Ihr Team auf Standard Compute
Legen Sie ein Unternehmenskonto an, laden Sie Ihr Team ein und geben Sie jeder Person und jeder Anwendung einen eigenen Schlüssel.
Häufige Fragen
Unser AWS-Bedrock-Kontingent für Claude in Frankfurt ist viel zu niedrig, und die Anfrage auf Erhöhung hängt seit zwei Wochen. Welche Alternativen mit EU-Hosting gibt es?
Innerhalb von AWS: das globale oder das EU-Inferenzprofil nutzen, `max_tokens` senken und mit echter Nutzung nachfassen, denn AWS bevorzugt Konten, die ihr Kontingent ausschöpfen. Außerhalb Ihres Kontos: Standard Compute bedient Claude Opus 5.5, Sonnet 5.5 und Haiku 5.5 in Europa über Google Vertex AI und Amazon Bedrock in Irland, ohne dass Sie ein eigenes AWS-Kontingent beantragen. Mit einer Europa-Regel wird jede Anfrage, auch Wiederholungen und Fallbacks, nur von freigegebenen europäischen Inferenz-Endpunkten bedient.
Welche Standardkontingente gelten für Claude auf Amazon Bedrock?
AWS veröffentlicht je Region 30.000.000 Tokens pro Minute über regionsübergreifende Inferenz für Claude Opus 5.5, Opus 5 und Opus 4.8, 6.000.000 für Sonnet 5.5, Sonnet 5 und Sonnet 4.6 und 10.000.000 für Haiku 5.5. Die Werte Ihres Kontos können niedriger sein; prüfen Sie Service Quotas.
Was bedeutet ThrottlingException auf Bedrock?
Ihr Konto hat ein Bedrock-Kontingent für dieses Modell überschritten, etwa die Tokens pro Minute. Prüfen Sie die Werte in Service Quotas, wiederholen Sie mit Backoff und Jitter und beantragen Sie bei stetigem Traffic eine Erhöhung.
Warum werden wir gedrosselt, obwohl der Verbrauch unter dem Kontingent liegt?
Weil Output-Tokens von Claude je nach Modell 5-, 10- oder 15-fach zählen und Bedrock beim Start jeder Anfrage den vollen max_tokens-Wert reserviert. Senken Sie max_tokens und nutzen Sie Prompt Caching, dessen Cache-Lesezugriffe nicht zählen.
Wie lange dauert eine Kontingenterhöhung auf Bedrock?
AWS nennt keine Frist. Kleinere Erhöhungen werden oft automatisch genehmigt, größere prüft der AWS Support, mit Vorrang für Konten, die ihr Kontingent bereits ausschöpfen. Für veraltete oder abgekündigte Modelle gibt es keine Erhöhung.
Lohnt sich Provisioned Throughput für Claude auf Bedrock?
Nur für planbare Dauerlast. Es wird stündlich je Modelleinheit abgerechnet, ohne Bindung oder für 1 oder 6 Monate, und funktioniert nicht mit Inferenzprofilen. Die Alternative für reservierte Tokens pro Minute ist der Reserved Tier ab 100.000 Input- und 10.000 Output-Tokens pro Minute, über Ihr AWS Account Team.
Quellen (geprüft am 9. November 2026)
- Kontingente für Amazon Bedrockdocs.aws.amazon.com
- Kontingente für den Bedrock-Runtime-Endpunktdocs.aws.amazon.com
- So werden Token in Amazon Bedrock gezähltdocs.aws.amazon.com
- Endpunkte und Kontingente von Amazon Bedrock (AWS Allgemeine Referenz)docs.aws.amazon.com
- Regionsübergreifende Inferenzdocs.aws.amazon.com
- Beheben der API-Fehlercodes von Amazon Bedrockdocs.aws.amazon.com
- Bewährte Methoden für Skalierung und Durchsatzdocs.aws.amazon.com
- Provisioned Throughput in Amazon Bedrockdocs.aws.amazon.com
- Servicestufen für die Inferenzdocs.aws.amazon.com
- Beantragen einer Kontingenterhöhung (Service Quotas)docs.aws.amazon.com
- Claude Code auf Amazon Bedrockcode.claude.com