AthenaでCloudWatch Logsをクエリする

• CloudWatch Logsの物足りない点

  • Logs Insightsを活用しても解決が難しい部分がある

• Athena Federated QueryでCloudWatch Logsのクエリを試行

  • クエリに時間がかかりすぎるうえ

  • 不親切なエラーログとドキュメントのせいでトラブルシューティングが難しい

• 結局、古典的な方法であるFirehoseでS3にアンロードし、Athenaでクエリ

  • この方法で考慮した事項

    • Firehose dynamic partitioning

    • Athena partition projection

    • Firehose buffer size & interval

  • 注意事項

    • CloudWatch Logs subscription filterの数の制限

    • ログ形式

    • コスト

• IaC

  • Athena table DDLをterraforming

[toughrogrammer]

箇条書きを多段で書いたのですが、フォーマットが崩れてしまいます…。空白とタブの両方を試してみましたが同じだったため、ひとまずそのままにしてあります。ご了承ください。

[xguru]

ああ、今はそれはできません。今後Markdownをサポートする予定なので、少しお待ちください〜

[toughrogrammer]

おお、期待しています！ いつも感謝しながらサービスを快適に利用しています。

[toughrogrammer]

コメントを追加してからもう一度試してみようと思ったのですが、投稿を削除できませんね。コメントがあると投稿は削除できないようです。