Wpis z mikrobloga

Czy jest jakiś sposób że przez #selenium albo jakoś inaczej zescrapowac wcześniej otworzoną manualnie stronę internetową? Mam taki problem, że chyba z powodu pewnych zabezpieczeń, do strony którą chce zescrapowac nie ma dostępu przez requests ani zwykle get selenium, mogę za to otworzyć stronę za pomocą biblioteki webbrowser lub manualnie.
#python #pytanie #programowanie
  • 4
  • Odpowiedz
@Oake: Nie wiem jak w pythonie, ale czemu nie użyć zabudowanej przeglądarki jak np. webview2. Do tego rotator proxy i inne bajery. A może taki banał jak pliki cookies ew. user-agent ?
  • Odpowiedz
@Oake: dlaczego nie ma dostępu przez "zwykłe get selenium" Sprawdź request headersy, cookies, params w dev toolsach i lecisz, odwzoruj webflow w postmanie a potem już górki
  • Odpowiedz