[becvvv]

https://grep.app/ to strona, gdzie można szybko znaleźć pliki na github.com, które zawierają wprowadzone przez nas słowo kluczowe.

Gdybym zrobił coś takiego, ale z wykopowym mikroblogiem? Najpierw musiałbym secrapować 55mln wpisów, co jak obliczyłem zajęłoby około miesiąca na 10 różnych ip. Takie coś jest legalne, czy białek będzie mnie ścigał po sądach?

#programowanie #naukaprogramowania #programista15k #prawo #github

[isInteger]

@becvvv:

[keton22]

@becvvv: wykop ma jakieś mityczne api. Brzmi jak lepszy pomysł i moze bez multi da radę.

[becvvv]

@keton22: API ma limity zadań. W ogóle się nie sprawdzi

[riakt]

@becvvv proxy kierowniku będzie twoim przyjacielem

[mirasKo-Kalwario]

@becvvv: @imlmpe kiedyś coś takiego robił nie pamiętam dobrze ale chyba wypok zablokował

[mirasKo-Kalwario]

@isInteger: wydaje mi sie że archiwum nie działa za dobrze wstecz, nigdy nie udalo mi sie dojsc dalej niz kilka miesiecy więc może by ci się udało to pobrać wszystko w kilka dni + na bieżąco wpisy pobierać

[becvvv]

@mirasKo-Kalwario: pobierałbym wpis po wpisie

[becvvv]

@riakt: można pobierać co ok. Pół sekundy, to nie muszę się bawić w proxy. VPN na 10 VM i to miesiąc pracy

[imlmpe]

@becvvv: oficjalnie zrobić tego nie możesz - rozmawiałem z administracją. Nie mam prawa przechowywać wpisów użytkowników wykopu u siebie przez więcej jak 24h. Jeśli to zrobię, to łamię regulamin. Więc wielkiej wyszukiwarki nie zbudujesz, a przynajmniej nie tak prosto :(

[becvvv]

@imlmpe: Chętnie przejrzałbym sobie najciekawsze wpisy z tagów #programowanie, czy np. #nieruchomosci. Nie rozumiem dlaczego po prostu nie dodadzą takiej opcji sortowania wpisów jak na np. reddicie:
- Top dzisiaj
- Top 1 tydzień
- Top 1 miesiąc
- Top 1