Cloudwatch Logsに吐かれるログを爆増させてしまった話【fluent-bit】 - Qiita

Cloudwatch Logsに吐かれるログを爆増させてしまった話【fluent-bit】 - Qiita

概要 先日、以下の記事で紹介したように、fluent-bitを利用して アプリケーションログをCloudwatch Logs...概要を表示 概要 先日、以下の記事で紹介したように、fluent-bitを利用して アプリケーションログをCloudwatch Logsに吐かせる設定を行いました。 しかし、時折Cloudwatch Logsへ異常なほど多いログが吐かれる事態が発生し、コストの上昇を招いてしまいました。 今回は、解決方法と根本原因について説明します。 何が起こったか fluent-bitからCloudwatch Logsへ送信されるアプリケーションログが 2024-04-29 21:03:48から2024-04-30 00:58:48の間急増しました。 fluent-bitのログを確認すると、requires a larger buffer size, lines are too long. Skipping fileが約1分毎に発生していることが分かりました。 また、CloudWatch Logs Insightsに