オリジンサーバーとは?
オリジンサーバーは、コンテンツの正本を保存または生成します。キャッシュやコンテンツ配信ネットワークは、ローカルでリクエストに応答できない場合、オリジンからそのコンテンツを取得します。
オリジンサーバーの仕組み
HTTP では、オリジンサーバーを、指定された対象リソースに対して権威あるレスポンスを生成できるプログラムと定義しています。配信アーキテクチャでは、CDN やリバースプロキシに再利用できる保存済みレスポンスがない場合に接続する上流に当たります。具体的には、オブジェクトストア、ウェブサーバー、マニフェストを組み立てるパッケージャー、リクエストに応じて派生メディアを生成するサービスなどです。クライアントから見ると、CDN 自体がオリジンサーバーに見えます。HTTP では、このような仲介役をゲートウェイ、またはリバースプロキシと呼びます。鮮度維持期間、検証子、キャッシュキー、範囲リクエストへの対応によって、オリジンに届くリクエスト数が決まります。広くリクエストされるオブジェクトの有効期限が切れたり、一度もキャッシュされていなかったりすると、リクエストがオリジンに集中する場合があります。この用語は、ブラウザーが同一オリジンポリシーや CORS に使う、スキーム、ホスト、ポートの組み合わせを指すウェブオリジンとは関係ありません。
要点
- 期限切れのオブジェクトは、すべてオリジンから再ダウンロードする必要がありますか?オリジンが検証子を送信する場合は不要です。古いレスポンスを保持しているキャッシュは、保存済みの
ETag(If-None-Match内)またはLast-Modifiedの日付(If-Modified-Since内)を使って条件付きリクエストを送信できます。コンテンツに変更がなければ、オリジンは表現を再送せずに 304(Not Modified)を返します。ただし、オリジンは転送されてきた検証リクエストをすべて受信し、応答する必要があります。そのため、検証子は転送バイト数を減らしますが、それだけではリクエスト数は減りません。 - 多数のエッジロケーションが同じオブジェクトを個別に取得するのを防ぐにはどうすればよいですか?キャッシュミス時のリクエストを、オリジンの手前にある単一の共有キャッシュ層に集約します。この層がなければ、キャッシュミスが発生した各ロケーションが、同じコンテンツに対して個別にリクエストを送信する場合があります。Amazon CloudFront Origin Shield、Fastly shielding、Cloudflare Smart Tiered Cache は、いずれも指定された上位層にこれらのリクエストを集約します。一方、Cloudflare の Generic Global トポロジーは、リージョンごとのプールから上位層を選択します。CloudFront と Fastly は、未キャッシュの同じオブジェクトに対する同時リクエストを、最少で一つのオリジンリクエストにまとめます。Fastly は制限事項も示しています。たとえば特定ユーザー専用のレスポンスなど、キャッシュ不可と判明した場合は、待機中の各リクエストを個別にオリジンへ送信する必要があります。AWS によると、Origin Shield は、オリジンへプロキシされる動的コンテンツ、キャッシュしにくいコンテンツ、リクエスト頻度の低いコンテンツには適さない場合があり、別途料金が発生します。
- オリジンが停止している間、閲覧者には何が返されますか?キャッシュ内でまだ有効なレスポンスは、引き続き配信されます。古いレスポンスについて、HTTP では、キャッシュが切断されているか、明示的に許可されている場合を除き、配信してはならないと定めています。また、レスポンスに
no-cacheまたはmust-revalidateがある場合、あるいは CDN などの共有キャッシュでproxy-revalidateまたはs-maxageがある場合は、いかなる場合も配信できません。これらのディレクティブがいずれも適用されない場合、RFC 5861 のstale-if-errorディレクティブは、オリジンが 500、502、503、504 を返すか、到達不能になったときに、古いレスポンスの配信を許可します。その値は、レスポンスが期限切れになってから許容される経過時間の上限です。障害開始時点から数えるのではありません。max-age=600, stale-if-error=1200の場合、エラー時にはレスポンスの経過時間が 1800 秒になるまでレスポンスを使用できます。計画メンテナンスをカバーするには、期限切れからの経過時間と停止時間の合計を含む値が必要です。細かな動作は CDN によって異なります。CloudFront のドキュメントによると、オリジンに到達できない場合や 5xx ステータスが返された場合、stale-if-errorが適用され、そのディレクティブの値と最大 TTL のうち短い方が上限になります。また、このディレクティブがなくても、オリジンが 5xx ステータスを返すと、保持している期限切れオブジェクトを配信します。一度もキャッシュされていないオブジェクトや、すでに保存されていないオブジェクトには、どの設定も役立ちません。CloudFront は、オリジンの障害が続いている間でも、リクエスト頻度の低いオブジェクトを削除する場合があると説明しています。 - オリジンが正しく動作していても、CDN 経由で誤ったバリアントが配信されることはありますか?レスポンスがキャッシュキーに含まれない要素に依存していると、その可能性があります。HTTP には二つの規則があります。
Varyヘッダーを持つ保存済みレスポンスは、指定されたヘッダーフィールドが一致するリクエストにのみ再利用できます。また、Authorizationを含むリクエストへのレスポンスは、レスポンスが明示的に許可していない限り、共有キャッシュで再利用してはなりません。CDN がVaryの規則をそのまま適用するとは限りません。Cloudflare のドキュメントによると、デフォルトではキャッシュ判断にVaryの値を考慮せず、Vary: Accept-Encodingの場合、または Vary 設定が構成されている場合にのみ、その値に従います。そのため、CDN がVaryで指定したヘッダーに従うことを確認するか、それらをキャッシュキーに追加してください。CDN が無視する設定になっている Cookie やクエリパラメーターなど、レスポンスを変化させる他の入力も同様です。キャッシュキーに追加するか、レスポンスをキャッシュ不可にしてください。 - クライアントは CDN を経由せず、オリジンに直接リクエストできますか?オリジンにパブリックに到達でき、そのアドレスが知られていれば可能です。その場合、CDN のキャッシュと保護を迂回します。Cloudflare のガイダンスでは、選択肢として、CDN の IP 範囲のみを許可する方法(安全性は中程度で、IP スプーフィングに脆弱と評価されています)、秘密のリクエストヘッダーを必須にする方法、TLS クライアント証明書で CDN を認証する方法(Authenticated Origin Pulls)、送信専用トンネルで接続してオリジンにパブリックにルーティング可能なアドレスを持たせない方法を挙げています。Amazon S3 オリジンについて、AWS は三つの作業を挙げています。まず、CloudFront からバケットへのリクエストに署名する CloudFront オリジンアクセスコントロールを作成し、ディストリビューションに関連付けます。次に、そのアクセスコントロールにファイルの読み取り権限を付与します。ドキュメントでは、そのディストリビューションに限定したバケットポリシーで設定しています。最後に、他の誰も Amazon S3 URL 経由でファイルを読み取れないよう、その権限を削除します。署名だけでは、公開読み取り可能なバケットに引き続き到達できます。
オリジンサーバーが重要になる場面
CDN に必要なアセットと操作だけを公開するようにオリジンを設定してください。オリジンの遅延や停止は、キャッシュミス、再検証、キャッシュ不可のコンテンツへの応答を遅らせます。エッジキャッシュだけでは、これらのリクエストに応答できないためです。エッジで鮮度が保たれているオブジェクトは、引き続き配信できます。
Transloadit によるオリジンサーバーの活用支援
Transloadit の Smart CDN には、上流側に二つの階層があります。元のファイルは Amazon S3 バケットなどの自身のストレージに保持され、Template がそこからインポートします。リクエストされた URL のキャッシュが CDN にない場合、Transloadit が Template を実行し、Robot /file/serve が結果を CDN に渡します。このため、Template の実行が tlcdn.com のオリジンとして機能し、バケットはその背後のソースとなります。/file/serve は、そのレスポンスに Cache-Control ヘッダーを設定します。その cache_duration パラメーターは、max-age と
s-maxage の両方を設定し、Template とストレージにリクエストが戻ってくる頻度を決定します。
/file/serve のドキュメントでは、前段に CDN を置かずに使用することを推奨していません。キャッシュされていないリクエストのたびに、変換が再実行されるためです。ここでリンクしているページには、キャッシュミス時にストレージに到達できない場合に何が配信されるか、また、有効期限の切れた結果を引き続き配信できるかについての説明はありません。
出典
- RFC 9110:HTTP の意味論(オリジンサーバー、セクション 3.6;仲介者、セクション 3.7;304 Not Modified、セクション 15.4.5 )
- RFC 9111:HTTP キャッシュ(Vary、認証付きリクエスト、古いレスポンス、検証)
- RFC 5861:古いコンテンツ向けの HTTP Cache-Control 拡張
- Amazon CloudFront: Origin Shield
- Fastly:シールド
- Fastly:リクエストの集約
- Cloudflare: Tiered Cache
- Amazon CloudFront:オリジンからの HTTP 4xx および 5xx ステータスコードの処理
- Amazon CloudFront:キャッシュの有効期限と古いコンテンツの配信
- Cloudflare:Origin Cache Control(Vary のデフォルトの処理)
- Amazon CloudFront:キャッシュキーの理解
- Cloudflare:オリジンサーバーの保護
- Cloudflare: Authenticated Origin Pulls (mTLS)
- Amazon CloudFront:Amazon S3 オリジンへのアクセス制限
- Amazon CloudFront:ファイルへのアクセス制限(Amazon S3 バケットに必要な三つの作業)