CORECを支える技術 ～ログ監視編～ fluentd-AmazonSNS連携
こんにちは。なべです。 CORECの開発を担当しています。 『CORECを支える技術 ～チケット駆動編～』に続き、『CORECを支える技術』シリーズの第2弾としてCORECのログ監視について書きたいと思います。 旧ログ監視の問題と対策 当初、CORECのログ監視はログ集約にくっつける形で始まりました。 ログ集約はログファイルを一定時間ごとにバックアップする仕組みで、各サーバーのログをfluentd
by
こんにちは。なべです。 CORECの開発を担当しています。 『CORECを支える技術 ～チケット駆動編～』に続き、『CORECを支える技術』シリーズの第2弾としてCORECのログ監視について書きたいと思います。 旧ログ監視の問題と対策 当初、CORECのログ監視はログ集約にくっつける形で始まりました。 ログ集約はログファイルを一定時間ごとにバックアップする仕組みで、各サーバーのログをfluentd
7/1に弊社の 決済サービスPaid（ペイド） のサーバー群へ ログ集約の改善を目的として導入した fluentd(td-agent) の導入手順などをまとめてみました。 ログ集約を改善する動機 弊社ではこれまで（今も大部分は） cron + rsync を使い、週次バッチでWebサーバー上のログファイルをファイルサーバーへ転送することで一応の集約をさせてきました。 （集約というよりはバ