Bedrock cross-region inference profile で不可解な断続エラーに遭遇した話

はじめに

このブログでは、管理者が記事の編集画面でボタンを押すと Amazon Bedrock を使って記事の要約やタグ候補を自動生成する Lambda を動かしています。

先日この Lambda で要約やタグ候補の生成を実行すると「成功したり失敗したりする」という断続的なエラーが発生しました。 原因を調査した際のメモを残しておきたいと思います。

---

構成

---

発生した問題

発生していたエラーは以下のような内容でした。

AccessDeniedException: Model access is denied due to IAM user or service role is not authorized
to perform the required AWS Marketplace actions
(aws-marketplace:ViewSubscriptions, aws-marketplace:Subscribe)
to enable access to this model.

エラー自体は AccessDeniedException で、メッセージに aws-marketplace:ViewSubscriptions, aws-marketplace:Subscribe とあります。

これは Bedrock でモデルを利用するために必要な AWS Marketplace サブスクリプションが不足している場合に発生するエラーのようです。

• Resolve access denied errors for Amazon Bedrock Agents - AWS re:Post
• Prerequisites for cross-region inference - Amazon Bedrock

ただし、常に失敗するわけではなく「成功したり失敗したりする」という断続的な挙動だったため、権限ではなく別のところに問題がある可能性を最初は疑いました。

---

原因（おそらく？）

cross-region inference profile のルーティング仕様

このシステムでは、コスト効率とスループット確保のために jp.anthropic.claude-haiku-4-5-20251001-v1:0 という Japan cross-region inference profile を使っています。

この inference profile は、リクエストを以下の 2 つのリージョンに 動的にルーティング する仕様になっているようです。 （参考: Increase throughput with cross-Region inference）

dynamically routing model invocation requests across the Regions defined in inference profile

実際の挙動としては、UI から生成をリクエストすると「1回目は成功、2回目は失敗」というような交互に成功・失敗するパターンが確認できました。

これは inference profile が 2 リージョンに交互にルーティングしており、東京へのルーティング時は成功し、大阪へのルーティング時は 403 で失敗していたためと考えられます。

補足

どちらのリージョンにルーティングされたかは CloudWatch ログから直接確認できるわけではなく、以下の状況証拠から推論しています。

1. 「1回目成功・2回目失敗」という規則的な断続挙動 → 2 リージョン間でルーティングが交互に切り替わっていると考えられる
2. エラー内容が Marketplace サブスクリプション不足 → 大阪側でモデルアクセスが未設定
3. CLI で大阪リージョン向けの呼び出しが 403 になることを確認（後述）

Marketplace モデルは、Marketplace 権限を持つユーザーがリージョンごとに一度実行することでアカウント全体に有効化される仕様になっています。

東京は過去のどこかのタイミングでその初回実行されていた？と考えられますが、大阪では一度も実行されていなかったため 403 になっていたと考えると腑に落ちました。

CLI での確認

まず、大阪リージョンでモデルを直接呼び出してみると、以下の ValidationException が返りました。

aws bedrock-runtime converse \
  --region ap-northeast-3 \
  --model-id anthropic.claude-haiku-4-5-20251001-v1:0 \
  --messages '[{"role":"user","content":[{"text":"hi"}]}]'
# => ValidationException: Invocation of model ID ... with on-demand throughput isn't supported.
#    Retry your request with the ID or ARN of an inference profile that contains this model.

どうやら inference profile を経由しないと直接呼び出せない仕様のため、jp.* inference profile 経由で東京から呼び出してみると、今度は 403 が返りました。

aws bedrock-runtime converse \
  --region ap-northeast-1 \
  --model-id jp.anthropic.claude-haiku-4-5-20251001-v1:0 \
  --messages '[{"role":"user","content":[{"text":"hi"}]}]' \
  --query 'output.message.content[0].text' \
  --output text
# => AccessDeniedException: aws-marketplace:ViewSubscriptions, aws-marketplace:Subscribe ...

jp.* inference profile 経由で呼び出すと 403 が返ることが確認できました。

よって、大阪リージョンへのルーティング時にモデルアクセスが通ればおそらく解決するのではと考えました。

対応内容

1. 大阪リージョンでの初回実行によるモデル有効化

AWS コンソールのリージョンを ap-northeast-3 (大阪) に切り替え、Bedrock Playground から Claude Haiku 4.5 を実行しました。

初回実行時に AWS Marketplace サブスクリプションが自動作成されることで、大阪リージョンへのルーティング時にも正常に処理が通るようになるのかと思われます。

Playground 実行後に再度 CLI でテストしたところ、正常応答が確認できました。

aws bedrock-runtime converse \
  --region ap-northeast-1 \
  --model-id jp.anthropic.claude-haiku-4-5-20251001-v1:0 \
  --messages '[{"role":"user","content":[{"text":"hi"}]}]' \
  --query 'output.message.content[0].text' \
  --output text
# => Hey there! 👋 How's it going? What can I help you with today?

2. Lambda IAM ロールへの Marketplace 権限追加

今後の類似問題を防ぐために、Lambda の実行ロールに Marketplace 権限を追加しました。

# infra/service/batch/article_llm/iam.tf
resource "aws_iam_role_policy" "bedrock_marketplace" {
  ...
  condition {
    test     = "StringEquals"
    variable = "aws:CalledViaLast"
    values   = ["bedrock.amazonaws.com"]
  }
}

aws:CalledViaLast = bedrock.amazonaws.com の条件を付与することで、Bedrock 経由の呼び出しのみに権限を限定しています。

なお、aws:CalledViaLast は「このアクションを実行しているのがどの AWS サービスか」を条件にするキーになります。

今回のケースに当てはめると、呼び出しチェーンは以下の流れになっています:

Lambda ロール → Bedrock → AWS Marketplace (ViewSubscriptions, Subscribe)

aws:CalledViaLast = bedrock.amazonaws.com を条件に付けることで、Marketplace のアクションは Bedrock が代わりに呼び出す場合にのみ許可され、Lambda ロールが Marketplace を直接呼び出すことは防ぐようなイメージになります。

AWS global condition context keys - Properties of the request

aws:CalledVia

• Use this key to compare the services in the policy with the services that made requests on behalf of the IAM principal (user or role). When a principal makes a request to an AWS service, that service might use the principal's credentials to make subsequent requests to other services. When the request is made using forward access sessions (FAS), this key is set with the value of the service principal. The aws:CalledVia key contains an ordered list of each service in the chain that made requests on the principal's behalf.

3. 動作確認

無事、AIによる要約ができるようになりました。

---

cross-region inference profile を使う際に気をつけること

今回の事象を通じて、Japan cross-region inference profile を使う際はルーティング対象の全リージョンで Marketplace モデルの初回実行を済ませておいた方が良いかもしれません。

具体的にはルーティング先のリージョンをすべて事前に確認し、各リージョンの Playground でモデルを一度実行しておくのがよいかと思います。

なお、Japan cross-region inference profile のルーティング先リージョンは AWS ドキュメント で確認できます。

---

まとめ

今回の問題は、cross-region inference profile が複数リージョンに動的ルーティングする仕様を把握しておらず、大阪リージョンで Marketplace モデルの初回実行が未実施のまま本番稼働していたことが原因のようでした。

「成功したり失敗したりする」という断続的な挙動は、2 リージョン間でルーティングされているものの、片方のリージョンだけ失敗しているというシグナルとして読み解けると思います。

Lambda の IAM ロールへの Marketplace 権限追加は予防策として有効ですが、根本的には inference profile 導入時にルーティング先の全リージョンで初回実行を済ませておくのが動作確認も兼ねて一番シンプルな解決策かと思います。

参考

• Increase throughput with cross-Region inference - Amazon Bedrock
• Supported Regions and models for inference profiles - Amazon Bedrock
• Prerequisites for cross-region inference - Amazon Bedrock
• Bedrock: cross-region inference profile causing 403 errors (GitHub - anthropics/claude-code #20594)