Aktywne Wpisy
cohh +75
Byłem dzisiaj w przychodni i postanowiłem skorzystać z prawa do pierwszeństwa w kolejce ze względu na posiadaną legitymacje honorowego dawcy krwi.
Pani w recepcji powiedziała, że mogę, ale pacjenci różnie reagują i się nie myliła.
Podszedłem pod gabinet lekarza, w kolejce było ~ 20 osób, spytałem się grzecznie kto teraz będzie wchodził i zacząłem wyjaśniać, że mam legitymację, jest takie prawo itd. przede mną była pani ~ 60 lat, powiedziała mi, że tu
Pani w recepcji powiedziała, że mogę, ale pacjenci różnie reagują i się nie myliła.
Podszedłem pod gabinet lekarza, w kolejce było ~ 20 osób, spytałem się grzecznie kto teraz będzie wchodził i zacząłem wyjaśniać, że mam legitymację, jest takie prawo itd. przede mną była pani ~ 60 lat, powiedziała mi, że tu
Lukaszo5 +112
panowie, bo czegoś nie rozumiem...
mam potrzebę scrapowania jednej strony, html pobierany jest co sekunde, co skutkuje blokada na ip po okolo godzinie (serwer odsyła 403)
więc zmodyfikowalem skrypty tak aby leciały przez proxy (ściągam liste 10000 może z 2000 jest działających) więc load się ładnie rozkłada
i tak sobie scrapowałem dane przez dwa tygodnie az do teraz. kazde proxy zwaca 403, glowne ip zwraca 403 (z lokalnego komputera moge sie dostać do url)
jako, że serwerek mam na aws to zrobiłem stop/start dostał nowe ip i nadal 403
co jest? możliwe, że aws mnie przyblokował?
co zrobić aby nadal sobie latał po tym url?
#network #networking #sieci #siecikomputerowe #programowanie #aws
używam pythona request get
response = get(url, proxies={'https': ip}, timeout=10)
gdzie ip to adres proxy
https://stackoverflow.com/questions/6260457/using-headers-with-the-python-requests-librarys-get-method
jakie headers ustawić? Te powinny wystarczyć:
https://www.whatismybrowser.com/detect/what-http-headers-is-my-browser-sending
jutro sprawdze cos takiego:
https://pypi.org/project/fake-useragent/
ale dodałem tez tego fake-useragenta, mam nadzieje ze przez to sie nie powtorzy problem
jeszcze raz dzieki