[zametr]

Od wczoraj obcinamy 2,0% skrajnych ofert przy wyliczaniu średnich cen. Jutro lub pojutrze dojdzie też mediana.

https://x.com/zametr/status/1874446168144650595

#nieruchomosci

[Wielka-Polska-Betonowa]

@zametr: zaraz Maciuś Pendzel się zesra na X że tak nie można i to manipulacja danymi ( ͡º ͜ʖ͡º)

[robroypl]

@zametr: w końcu zamiast biadolenia że potrzebne AI, ktoś zaglądnął w książkę do statystyki.
Ciekawe jaki kolejny myk opracują koneserzy betonowego złota

[Fredi_Kamionka_Gmina_Burzenin]

@zametr: ale poprawiliście też stare dane według tej metodologii, prawda? Czy będziecie na jednym wykresie pokazywać dane według dwóch metodologii i wykopowi eksperci będą wysuwali wnioski?

[zametr]

@Fredi_Kamionka_Gmina_Burzenin: póki co daliśmy info o zmianie liczenie średniej w nagłówku.

Do czasu przeliczenia danych (1-2 miechy) będzie informacja pod wykresem w przypadku średniej, bo medianę mierzymy niezmiennie od 3 lat, tylko nigdy jej nie prezentowaliśmy.

[robroypl]

@zametr: długa ta kwerenda w SQL do przeliczenia, że execute w 30-60 dniach się zamyka :)

[Sebastix]

@zametr: alez mnie teraz zaimponowałeś Panie kolego zametr xD
(｡◕‿‿◕｡)

[zametr]

@robroypl: jak to Abraham Lincoln mówił, daj mi 60 dni na przeliczenie danych, a spędzę pierwsze 40 dni na cyzelowaniu zapytania SQL.

[Czekolatka]

@zametr Można jeszcze użyć jakiegoś modelu statystycznego zamiast obcinać na sztywno, np. isolation forest, wtedy to już w ogóle te dane byłyby odporne na jakąkolwiek manipulacje. Nie wiem w czym tam to piszecie ale w pythonie scikit ma fajne implementacje takich rzeczy. W node też jest ml-isolation-forest. Nawet łatwiej tego użyć niż obcinać 2%. Przy 100mln próbek to będzie 20 min liczenia w pythonie.

[zametr]

@Czekolatka:

Przy 100mln próbek to będzie 20 min liczenia w pythonie.

ILE!?!

Dzięki, ale myślę, że nie ma potrzeby używać tak skomplikowanego algorytmu. Pole do manipulacji przy ścinaniu 2,0% i medianie są i tak już mocno ograniczone. Poza tym wydaje mi się, że ten algorytm dalej przepuszczałby ceny za m2, które mieszczą się w górnych kilku procentach rozkładu, tzn. umożliwiałby sztuczne podnoszenie średniej.

[Czekolatka]

@zametr dzięki za odpowiedź. Spora różnica jest przy wycięciu tych 2%?

[zametr]

@Czekolatka: spora. Andrzej się wnerwił.

[Kupamilosci]

@zametr: a może byście tak śledziły ceny mieszkań z bardziej popularnych stron niż morizon?

[lothar1410]

@Kupamilosci: @zametr
przede wszystkim otodom

[Kupamilosci]

@lothar1410: dokładnie, bez tego to ta strona jest nijaka. Nie wiem czy kiedykolwiek ja albo ktoś z mojego otoczenia w ogóle słyszał o tym czymś co oni śledzą.

[varchar12]

@zametr: 1,7% w sumie to jeszcze nie tak dużo. Mniej niż inflacja. Zobaczymy ile zejdzie jeszcze w przeciągu roku dwóch.

[DOgi]

Dzięki, ale myślę, że nie ma potrzeby używać tak skomplikowanego algorytmu

@zametr: a ja myślę, że warto spróbować. Nawet jeśli nie na stronie, to możecie wrzucać takie analizy z wykorzystaniem alternatywnych algorytmów na X.

[marcaj]

Od wczoraj obcinamy 2,0% skrajnych ofert

ktoś zaglądnął w książkę do statystyki.

@robroypl: @zametr: a o odchyleniu standardowym słyszałeś pan?

[zametr]

@Kupamilosci: oferta jest oferta, niezależnie od tego, gdzie się pojawi.

[editores]

@robroypl: złe wyliczenia. nie uwzględniono stałej delta, czyli bólu d--y biedaków z wykopu.

[Paprykass]

@zametr: kocham was! Chciałem to napisać!