Athena が高いと思ったら、S3 の料金だった

• #クラウド
• #インフラ
• #DevOps・CI/CD

AIで作成し、掲載基準に基づいて自動選定した要約です。

• S3のオブジェクト数を減らすことで月額コストを98ドルから5ドルに削減した
• 1時間分の小ファイルを1つのNDJSONにまとめるLambda処理と、オブジェクトのコピー・削除処理を実装
• Athenaでクエリする際のS3オブジェクト数がコストに大きく影響するため、オブジェクト数を減らす対策が必要