画像の多い商品詳細ページだけが特に遅いという問い合わせが来ました。
サーバの応答時間は50 ms前後と速いのに、ページ全体が表示されるまでに数秒かかります。
この差は、ブラウザが
HTML1つではなく数十個のオブジェクトをそれぞれリクエストする
ことと、HTTPの接続方式から生じます。
前の記事 では、アプリケーション層の原則を整理しました。
この記事では、Webのアプリケーション層プロトコルである
HTTP
(HyperText Transfer Protocol)が接続を確立してメッセージをやり取りする方法、状態を記憶するCookie、応答を速くするWebキャッシュを順に見ていきます。
HTTPは、WebクライアントとWebサーバがやり取りするリクエストとレスポンスのメッセージの形式と順序を定義したアプリケーション層プロトコルです。
Webページは複数の
オブジェクト
(object)で構成されます。
基本となるHTMLファイルがあり、その中で画像、CSS、JavaScriptファイルなどのオブジェクトをURLで参照します。
ブラウザはHTMLを受け取った後、参照されたオブジェクトを1つずつ追加でリクエストします。
HTTPはトランスポートプロトコルとして
TCP
を使います。
クライアントがサーバとTCP接続を確立すると、双方はソケットでメッセージをやり取りし、メッセージの損失と順序はTCPが責任を持ちます。
また、HTTPサーバは以前のリクエストを記憶しない
ステートレス
(stateless)なプロトコルです。
同じクライアントが同じオブジェクトを2回リクエストしても、サーバは初めて受けたリクエストのように再び応答します。
非持続接続
(non-persistent connection)は、オブジェクトを1つやり取りするたびにTCP接続を新しく確立して閉じる方式です。
オブジェクト1つを受け取るのにかかる時間は次のとおりです。
TCP接続の確立に1 RTT
HTTPリクエストを送り、レスポンスの最初のバイトを受け取るのに1 RTT
ファイルを送信する時間
RTT
(Round-Trip Time)は、小さなパケットがクライアントからサーバまで行って戻ってくるまでの時間です。
つまり非持続接続では、オブジェクトごとに
2 RTT + ファイル送信時間
がかかります。
持続接続
(persistent connection)は、一度確立したTCP接続を閉じずに複数のリクエストとレスポンスに再利用します。
HTTP/1.1からデフォルトの動作で、サーバは一定時間リクエストがないと接続を閉じます。
レスポンスを待たずにリクエストを連続して送れば、複数のオブジェクトをほぼ1 RTTで受け取ることもできます。
条件 値 RTT 50 ms オブジェクト数 HTML 1個 + 画像 10個 ファイル送信時間 無視 非持続接続、順次リクエスト 11 × 2 RTT = 1,100 ms 持続接続、順次リクエスト 1 RTT + 11 × 1 RTT = 600 ms 持続接続、画像の連続リクエスト 1 RTT + 1 RTT + 1 RTT = 150 ms
同じページでも、接続方式によって応答時間に7倍以上の差が出ます。
そのため、ブラウザは持続接続を使い、サーバと複数の接続を並列に確立して遅延を減らします。
非持続接続はオブジェクトごとにTCP接続の確立とリクエストに2 RTTを使い、持続接続は一度確立した接続で複数のオブジェクトを続けてやり取りするため全体の時間が短くなる比較
HTTP/1.1のメッセージは人が読めるASCIIテキストです。
curlの
-vオプションを使うと、実際にやり取りされるリクエストとレスポンスのヘッダを確認できます。
curl -v https://example.com/ -o /dev/null
出力で>から始まる行がリクエストメッセージです。
> GET / HTTP/1.1
> Host: example.com
> User-Agent: curl/8.7.1
> Accept: */*
リクエスト行
メソッド、URLパス、HTTPバージョンで構成されます。メソッドには取得のGET、データ送信のPOST、更新のPUT、削除のDELETE、ヘッダだけを受け取るHEADがあります。
ヘッダ行
Hostヘッダは、1つのIPアドレスで複数のドメインを提供するサーバが、どのサイトが求められているかを知るために必要です。
本文
POSTやPUTのようにデータを送るリクエストで使います。
<から始まる行はレスポンスメッセージです。
< HTTP/1.1 200 OK
< Content-Type: text/html
< Content-Length: 1256
< Cache-Control: max-age=3600
最初の行の
ステータス行
は、HTTPバージョン、ステータスコード、ステータスフレーズで構成されます。
ステータスコード 意味 代表的な状況 200 OK リクエスト成功 正常なレスポンス 301 Moved Permanently 恒久的な移動 ドメインやURLの変更 304 Not Modified 変更なし キャッシュしたオブジェクトをそのまま使用 400 Bad Request 不正なリクエスト リクエスト形式のエラー 404 Not Found オブジェクトなし 存在しないパス 500 Internal Server Error サーバエラー 処理中の例外発生
-vの出力はHTTPメッセージを見やすく整えて表示しています。
HTTP/2以降は同じ意味を
バイナリフレーム
で送るため、実際のパケットではテキストとしては見えません。
HTTPはステートレスなプロトコルですが、ログインやショッピングカートのようにユーザーを記憶する機能が必要です。
そこで使われるのが
Cookie
(cookie)です。
ユーザーが初めてアクセスすると、サーバは識別番号を作り、レスポンスのSet-Cookieヘッダに入れて送ります。
ブラウザはこの値をドメインごとに保存します。
以後、同じサイトにリクエストするたびに、ブラウザがCookieヘッダに値を入れて送ります。
サーバはこの値でデータベースからユーザーのセッションを探します。
つまり、プロトコル自体はステートレスのままにして、
状態はクライアントのCookieとサーバのストレージに
置きます。
🖐️
セッションCookieには
HttpOnly、
Secure、
SameSite属性を指定する必要があります。
これらの属性がないと、スクリプトでCookieを読み取られたり、暗号化されていない接続や他サイトからのリクエストでCookieが送信されたりする危険が高まります。
Webキャッシュ
(web cache)またはプロキシサーバは、オリジンサーバの代わりに最近のレスポンスを保存しておき、返すサーバです。
ブラウザがキャッシュにリクエストすると、キャッシュは保存済みのオブジェクトがあればすぐに応答し、なければオリジンサーバから受け取って保存した後に応答します。
Webキャッシュはユーザーの近くにあるため応答時間が短くなり、組織の外部回線のトラフィックも減ります。
この原理はデータ構造の
キャッシュとヒット率
の概念と同じで、今日ではCDN(Content Delivery Network)がこの役割を世界規模で担っています。
キャッシュしたオブジェクトがオリジンと同じかを確認する方法が
条件付きGET
(conditional GET)です。
キャッシュは保存しているオブジェクトの
ETag値や
Last-Modified時刻をリクエストヘッダに入れて送ります。
curl -sI https://example.com/ | grep -i etag
curl -sI -H 'If-None-Match: "replace-with-etag"' https://example.com/ | head -1
最初のコマンドで得た
ETag値を、2番目のコマンドの
If-None-Matchヘッダに入れます。
オブジェクトが変わっていなければ、サーバは本文なしで
304 Not Modifiedだけを送り、キャッシュは保存したオブジェクトをそのまま使います。
本文を再び受け取らないので、大きな画像やバンドルファイルほど効果が大きくなります。
👨💻
ビルドのたびに名前が変わるハッシュ付きファイル名の静的ファイルには、
max-ageを長くして
immutableを指定してください。
HTMLのように内容が変わる文書には
no-cacheを指定して毎回条件付きリクエストを送らせれば、
キャッシュの効果と鮮度を両立
できます。
HTTP/1.1は1つの接続でリクエストを順番に処理するため、前の大きなレスポンスが遅れると後ろの小さなレスポンスも一緒に待つ
HOLブロッキング
(Head-of-Line blocking)が発生します。
HTTP/2
メッセージを小さなフレームに分け、1つのTCP接続で複数のリクエストとレスポンスを混ぜて送る多重化
をサポートします。ヘッダ圧縮とストリームの優先度も提供します。
HTTP/3
TCPの代わりにUDP上のQUIC
を使います。パケットが1つ失われても該当ストリームだけが待つのでTCPレベルのHOLブロッキングがなくなり、接続確立とTLSハンドシェイクをまとめることで最初の応答が速くなります。
HTTPはTCP上で動作する
ステートレスなリクエスト・レスポンス型プロトコル
です。
持続接続はオブジェクトごとに接続を確立するコストをなくしてページの読み込み時間を大きく短縮し、Cookieはステートレスなプロトコルの上でユーザーの状態を保ちます。
Webキャッシュと条件付きGETは同じオブジェクトを繰り返し受け取らないようにし、応答速度とトラフィックを同時に改善します。
ページが遅いときは、サーバの応答時間だけでなく、ブラウザの開発者ツールのネットワークタブでリクエスト数、接続の再利用、キャッシュのヒット状況もあわせて確認してみてください。
次の記事では、ブラウザがサーバのIPアドレスを調べる仕組みである
DNS
を見ていきます。