Mirki/Mirabelki - jest jakiś spec który podpowie jak w databricksach sensownie przetwarzać tabele z msc przyrostem ~1 mld rekordów ? Na ten moment jest próba za pomocą first / last _value dodawać inne miarki, jednakże przy takiej ilości danych jest to całkowicie nieoptymalne / niewydajne i niemożliwe.
Tylko teraz jest problem - trzeba znaleźć Kaczorowi takiego rywala, który by go podcoorwiał tak jak Kapela. A drugiego takiego lewaka we Freakach nie ma niestety. Kapela ma tą zaletę, że dla niego jest cała masa prawaków do prowokowania, odwrotnie już tak fajnie nie ma #famemma #primemma
Na ten moment jest próba za pomocą first / last _value dodawać inne miarki, jednakże przy takiej ilości danych jest to całkowicie nieoptymalne / niewydajne i niemożliwe.
#programowanie #sql
https://learn.microsoft.com/en-us/sql/t-sql/statements/create-columnstore-index-transact-sql?view=sql-server-ver16
używacie delta lake?