[linuksozerca]

#aws athena, kompresja logów do lzo oraz sync do s3, piękna sprawa. Oczywiście do tego partycjonowanie per data (rok,miesiac,dzien) i zmniejszamy koszty opłat ($5 per TB) za wyszukiwanie konkretnych danych. Polecam.

[ManamanaTuriruriru]

@linuksozerca podziękował. Zobaczę jak to się ma. Ja robię logrotate + date i s3cmd sync

[linuksozerca]

Ja również logrotate z kompresja do lzo, jako lastrun sync do s3 bukiet:domena/rok/miesiąc/dzień/serwer. schema per domena gdyż dochodzą nam inne domeny od czasu do czasu. Partycje z poziomu Crona raz dziennie. Node www jest wiele więc dlatego je dziele na serwery.

[moko12345]

@linuksozerca: Athena jest genialna :) Obok Lambdy best service :)