ログストリーミング: Google Cloud Storage

1. リモートログストリーミングの設定に関するガイドをご確認ください。
2. Google Cloud Services エリアで、Create endpoint をクリックします。
3. Create a Google Cloud Storage (GCS) endpoint フィールドに、以下のように記入します。
   • Name フィールドに分かりやすいエンドポイントの名前を入力します。
   • Placement セクションでは、生成される VCL にログコールが配置される場所を選択します。有効な値は Format Version Default、waf_debug (waf_debug_log)、None です。詳細については、ログ配置の変更に関するガイドをご覧ください。
   • Log format フィールドには、ログ形式に使用する Apache 形式の文字列や VCL 変数を任意で入力します。詳細については、形式例のセクションをご覧ください。
   • (オプション) Timestamp format フィールドに、ログファイルのタイムスタンプ形式を入力します。デフォルトでは strftime 互換文字列です。詳細については、ログファイルの書き込み先の変更に関するガイドを参照してください。
   • Email フィールドには、Google のWebサイトで作成したサービスアカウントに関連付けられた JSON ファイルに記載されている client_email アドレスを入力します。
   • Bucket name フィールドに、ログを保存する GCS バケットの名前を入力します。
   • Access Method セクションで、ログ配信の目的で Fastly が Google リソースにアクセスする方法を選択します。有効な値は、User Credentials と IAM Role です。
   • User Credentials を選択した場合は、以下のフィールドに入力します。
     • Email フィールドには、Google のWebサイトで作成したサービスアカウントに関連付けられた JSON ファイルに記載されている client_email アドレスを入力します。
     • Secret key フィールドには、Google の Webサイトで作成したサービスアカウントに関連付けられた JSON ファイルに記載されている private_key の値を入力します。JSON の改行エスケープ処理は Fastly が行いますので、削除する必要はありません。
   • IAM Role を選択した場合、以下のフィールドに入力します。
     • Service Account Name フィールドに、Google IAM サービスアカウントの権限借用を設定する際に入力したサービスアカウント名から作成されたサービスアカウント ID を入力します。サービスアカウント ID は、サービスアカウントのメールアドレスの @ より先の文字列です。例えば、サービスアカウントのメールアドレスが my-name@projectid.iam.gserviceaccount.com の場合、サービスアカウントの ID は my-name になります。
     • Project ID フィールドには、Google Cloud Platform プロジェクトの ID を入力します。
   • (オプション) PGP public key フィールドに、Fastly がログファイルをディスクに書き込む前に、ログファイルを暗号化するために使用する PGP 公開鍵を入力します。秘密鍵で復号化することによってのみ、コンテンツを読み取ることができます。PGP 公開鍵は PEM (Privacy-Enhanced Mail) 形式でなければなりません。詳細については、ログの暗号化に関するガイドをご覧ください。
   • (オプション) Period フィールドに、ログファイルのローテーションの頻度をコントロールするための間隔 (秒単位) を入力します。ローテーションにより、1つのファイルオブジェクトが完了すると、新たなファイルオブジェクトが作成されます。以前に作成されたファイルオブジェクトが削除されることはありません。デフォルトでは3600秒に設定されています。
4. Advanced options をクリックし、以下のようにフィールドに入力します。
   • (オプション) Path フィールドには、ファイルを保存するバケット内のパスを入力します。パスの末尾にスラッシュを付けます。このフィールドを空にすると、ファイルはバケットのルートパスに保存されます。詳細については、ログファイルの書き込み先の変更に関するガイドを参照してください。
   • Select a log line format のセクションで、ログメッセージのログライン形式を選択します。詳細については、ログライン形式の変更に関するガイドをご覧ください。
   • (オプション) Compression フィールドで、ログファイルに適用する圧縮形式を選択します。詳細については、ログ圧縮オプションの変更に関するガイドをご覧ください。
5. Create をクリックして新規のログエンドポイントを作成します。
6. Activate をクリックして設定への変更をデプロイします。

フォーマットの例

以下に示すのは、GCS にデータを送信する書式指定文字列の例です。書式指定文字列の詳細については、こちらをご覧ください。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18

{
  "timestamp": "%{strftime(\{"%Y-%m-%dT%H:%M:%S%z"\}, time.start)}V",
  "client_ip": "%{req.http.Fastly-Client-IP}V",
  "geo_country": "%{client.geo.country_name}V",
  "geo_city": "%{client.geo.city}V",
  "host": "%{if(req.http.Fastly-Orig-Host, req.http.Fastly-Orig-Host, req.http.Host)}V",
  "url": "%{json.escape(req.url)}V",
  "request_method": "%{json.escape(req.method)}V",
  "request_protocol": "%{json.escape(req.proto)}V",
  "request_referer": "%{json.escape(req.http.referer)}V",
  "request_user_agent": "%{json.escape(req.http.User-Agent)}V",
  "response_state": "%{json.escape(fastly_info.state)}V",
  "response_status": %{resp.status}V,
  "response_reason": %{if(resp.response, "%22"+json.escape(resp.response)+"%22", "null")}V,
  "response_body_size": %{resp.body_bytes_written}V,
  "fastly_server": "%{json.escape(server.identity)}V",
  "fastly_is_edge": %{if(fastly.ff.visits_this_service == 0, "true", "false")}V
}