dev_null__
dev_null__
Treść przeznaczona dla osób powyżej 18 roku życia...
0
  • Najlepsze
  • Wszystkie komentarze
arysto2011
@ItsyBitsyPajonk: Te portale na bank są zabezpieczone przed takimi działaniami i zablokują scrapujące IP w kilka minut.
4
I.....k
@dev_null__: Mógłbyś zaciągnąć cały HTML i potem lokalne pliki crawlować np. Puppeteerem, ale jak dla mnie to jest ta sama robota co napisanie prostego crawlera do każdego serwisu i zaciąganie od razu przetransformowanych danych do użytku np. w Sheets.

Edit: W zależności od tego jak dużo tych danych potrzebujesz - zastanów się, bo prosty crawler możesz nawet w Apps Scripts napisać i będzie Ci zaciągał dane bezpośrednio do Google Sheets.
1
I.....k
@arysto2011: byś się zdziwił jakie portale nie są zabezpieczone w ogóle przed czymś takim ( ͡° ͜ʖ ͡°)
0
arysto2011
@ItsyBitsyPajonk: Juz nie raz się zdziwiłem, jak nawet najgłupsze blogi są.
0
iforgotmypass_
@arysto2011: no ale przecież są na to sposoby, choćby zwykła rotacja proxy. Jest teraz pełno stron co dają różne narzędzia żeby ułatwic scrapowanie
0