Czy ktoś poleci alternatywę dla mułowatego WinHTTrack, co pobiera strony pojedynczo zamiast wielowątkowo? Czy coś źle ustawiłem? Ponadto nadpisuję nagłówek "Accept-Encoding: identity" by wyłączyć kompresję, a HTTrack prawdopodobnie wysyła swój.

#internet #httrack #programy #hacking #crawling

#datamining #crawling #boty #scraping

Jakis tutorial dla poczatkujacego zawierajacego instrukcje jak zautomatyzowac zbieranie podstawowych informacji na stronach? niczego ciekawego znalazlem

Panowie (albo panie) ktoś, coś?
https://www.wykop.pl/wpis/24902957/#comment-89100081

Pokaż spoiler

Czemu po prawie 200 dniach od uruchomienia yacy, mam w bazie danych jedyne 70GB?

#yacy #crawling