VPC Flow Logs

VPC Flow Logsの送信先にAmazon CloudWatch Logsを選択した場合、ログにどのような設定を行うことができるのかご紹介します。 用語 Amazon VPCとは VPC Flow Logsとは Amazon CloudWatch Logsとは VPC Flow Logsの用途 VPC Flow Logs作成時の設定 フィルタ 最大集約間隔 ログレコード形式 Amazon CloudWatch Logs作成時の設定 保持期間 メトリクスフィルタ データ保護 おわりに 用語 Amazon VPCとは Amazon Virtual Private Cloudの略称で、AWS上…

AWSで通信を追跡する上で、欠かせないのがflowlogとそれを解析して出入りを確認します。 CSV出せるのでExcelでも見れますが、色々変換が必要。 エクセルの式は、下記参考にして実行すればできる。 ExcelでUnixtimeを日付に変換 出力したCSVは、message部分を以下と置換。 そのあと、B列をスペース区切りで分割してやる。 version account-id interface-id srcaddr dstaddr srcport dstport protocol packets bytes start end action log-status エクセルの式はB列に追加…

はじめに VPC Flow Logs で取得したフローログを CloudWatch Logs に発行する方法についてまとめる。 VPC Flow Logs とは VPC のネットワークインターフェース（≒ ENI）との間で行き来する IP トラフィックに関する情報をキャプチャしてログに記録する機能であり、取得したデータは CloudWatch Logs または S3 に発行できる。 フローログはネットワークトラフィックのパスの外で収集されるため、ネットワークのスループットやレイテンシーに影響を与えることなく取得できる。 フローログは VPC、サブネット、特定の ENI に対して作成できる。 ロ…

今回のテーマ：VPC Flow Logs 目的：VPCのトラフィックをCloudWatchと連携し取得 CloudWatchのメトリクス追加 CloudWatchを有効化するためのIAMを追加 VPC Flow Logsの有効化 CloudWatchのメトリクス追加 マネージドコンソール-ClioudWatchを検索しクリック ログを選択し、ロググループ名を任意で入れてロググループを作成をクリック 保存期間の設定(今回は1週間)を変更し、作成をクリック CloudWatchを有効化するためのIAMを追加 マネージドコンソール-IAMを検索しクリック アクセス管理-ポリシーを選択し、ポリシーの作…

こんにちは！イーゴリです。 シナリオ 対策方法 Amazon EC2 インスタンスの隔離方法 ネットワークACLでのトラフックブロック セキュリティグループでのトラフィックブロック 自動化（スクリプト編） Amazon EC2インスタンスの分離の自動化 Amazon EC2 インスタンスのAMIの自動取得 Amazon EC2インスタンスの封じ込めの完全自動化の一例 イメージ図 必要なコンポーネント シナリオ Amazon GuardDutyから「CryptoCurrency:EC2/BitcoinTool.B!DNS」のようなクリティカル通知を受けました。 対策方法 対策の流れは下記となりま…

仕事でＶＰＣフローログを解析する必要があったのでATHENAを使用してみました。 手動でエクセルにまとめて解析するよりずっと早く便利です。 最初は戸惑いますがあとはやり方がわかれば簡単にログ解析が可能です。 ATHENA設定 データベース作成 まずデータベースの作成が必要です。 CREATE DATABASE VPCFlowLogsDB テーブル作成 次にテーブルを作成します。 CREATE EXTERNAL TABLE IF NOT EXISTS VPCFlowLogsTB ( version int, account string, interfaceid string, sourcead…

G-gen の杉村です。2024年10月現在で利用可能な12種類の Cloud Load Balancing のアクセスログは、それぞれフォーマットが異なります。アクセスログをクエリするための Cloud Logging クエリと、アクセスログのサンプルを掲載します。 はじめに アクセスログのフィルタリング フィールドに入る値の違い 公式ドキュメントの記述 Cloud Logging 用クエリ アクセスログのサンプル Global external Application Load Balancer Classic Global external Application Load Balanc…

G-gen の杉村です。2024年8月のイチオシ Google Cloud アップデートをまとめてご紹介します。記載は全て、記事公開当時のものですのでご留意ください。 はじめに Google Cloud Next Tokyo '24 で新発表 Python SDK で API コールなしで Gemini のトークン数カウント（Preview） Gemini on Vertex AI で、1リクエストで複数回答候補の生成が可能に SCC の Cloud Infrastructure Entitlement Management（CIEM）機能が公開 Cloud Logging でログスコープ機能…

責任共有モデル 継承される統制 物理統制 環境統制 共有統制 パッチ管理 構成管理 意識とトレーニング お客様固有 お客様が特定のセキュリティ環境内でデータをルーティングまたは区分する必要がある、サービスおよび通信の保護またはゾーンセキュリティ。 AWS Well-Architected Framework 運用上の優秀性 運用上の優秀性は、開発をサポートし、ワークロードを効率的に実行し、運用に関する洞察を得て、ビジネス価値をもたらすためのサポートプロセスと手順を継続的に改善する能力のことです。 セキュリティ セキュリティは、クラウドテクノロジーを活用し、セキュリティ体制の向上を可能にするやり…

はじめに こんにちは。WEARバックエンド部SREブロックの春日です。普段はWEARというサービスのSREとして開発・運用に携わっています。本記事では、約60％のコスト削減に成功したNATゲートウェイの通信内容の調査方法と通信量の削減方法についてご紹介します。

個人プロジェクトの一環で、Amazon DocumentDB を試してみることにしました。Amazon DocumentDB も MongoDB も初めて使うため、ChatGPT と Claude に手順を聞きながら作業を進めました。ある程度ハルシネーションがあることは普段から認識していましたが、やはりいくつかの問題に直面しました。 ゴール API Gateway のユーザー作成 endpoint にリクエストが送信されると、Lambda が発火して、DocumentDB にデータを書き込むというシナリオを構築しました。 AWS のインフラ図 DynamoDB のインフラ インフラは Terr…

CloudTrail Insightsとは アカウント内のAPIアクティビティを記録し、通常と異なる動作を検知しログ出力からSNSなどと連携して通知を行える。 グローバルではなく１つのリージョンで発生するイベントを分析する。 通常と異なるとは 過去データを通常とし、現在発生したAPIイベントと比較する。 GuardDutyとの違い 目的： CloudTrail Insights：クラウド環境における異常なAPIアクティビティの検出 GuardDuty：クラウド環境における脅威検出 機能： CloudTrail Insights：CloudTrailのデータを分析し、通常の動作から外れる異常なA…

ipv4を使用しないEC2でAdGuard Homeを現在運用していますが、たまにAdGuard Homeのログを観察すると、自宅のISPが使用するアドレスと携帯キャリアのアドレスしかありませんでした。 ipv4を使用していたときは海外からよくわからん場所からのクローラーと思われるアクセスがあったりしましたが、AdGuard Homeのダッシュボードを見る限り、ipv6のみにした場合は、自分の身に覚えのあるアクセスログがありませんでした。 ほんとうに、身に覚えのあるアクセスしかないのか、フローログを採ってみてログを見てみます。 どこのフローログを採る？ フローログを採るタイミングが2か所あるよ…

こんにちは！エンタープライズクラウド部クラウドコンサルティング課の日高です。 もし私のことを少しでも知りたいと思っていただけるなら、私の後輩が書いてくれた以下のブログを覗いてみてください。 sabawaku.serverworks.co.jp 今回は、AWS Network Firewall構築の際に設計の助けになればと思い、AWS Network Firewallのパラメーターの内容を記載していきます。 AWS Network Firewallの概要 AWS Network Firewallのパラメーター一覧 基本設定 IPアドレスタイプ カスタマーマネージドキーの利用 変更保護 削除保護 …

こんにちは。ソーシャル経済メディア「NewsPicks」で検索システムを開発しております崔（ちぇ）です。 弊社の検索システムはAWS EC2（Elastic Compute Cloud、以下、EC2）で動いていました。それを昨年、Amazon ECS（Elastic Container Service、以下、ECS）に移行しました。前回のブログでは、移行のために調べた「アプリケーションをコンテナ化するベストプラクティス」をまとめましたので、ご興味ある方は読んでいただけると嬉しいです。 tech.uzabase.com 今日は、ECS on Fargateのタスク起動に手こずった話をしてみようと…

こんにちは！ カスタマーサクセス部の河本と申します。 今回の記事では、実際にTransit Gateway Flow Logsの中身を見て理解を深めたいと思います。 Transit Gateway Flow Logsとは、Transit Gatewayを経由するトラフィックをロギングする機能です。 ログの中身については後述しますが、Transit Gatewayを使用した複雑なネットワーク構成でのトラブルシューティングにも役立ちます。 本記事の目次は以下の通りです。 構成図 設定方法 １．ロググループの作成 ２．IAMロールの作成 インラインポリシー 信頼ポリシー ３．フローログの作成 フロー…