[alfabetaborzy]

Próbował ktoś z was używać BeautifulSoup do scrapowania filmweba? Niby wszystko działa, z tym że przy dodawaniu kolejnych stron z użyciem pętli page = requests.get("https://www.filmweb.pl/user/xxx/wantToSee?page="+str(i)+"") w ogóle nie uwzględnia tych stron i pobiera mi dane tylko z pierwszej. Filmweb ma coś zablokowane czy o co chodzi? Na stacku i ogólnie w necie nie widzę innych rozwiązań do parsowania kolejnych stron
#python

[mathix]

@alfabetaborzy: Może to aplikacja single page i zrzuca tylko głównego html-a? Generalnie nie wiem co daje BeautifulSoup w czasach wszechobecnych SPA.

Mój kumpel dużo scrape'ował wykorzystując przeglądarki selenium albo (co sprawdza się lepiej) puppeteera.

[Strzalka]

@alfabetaborzy: tak jak mowi przedmowca sprawdz pajtonowa wersje paczki xzyli pypeter

[Krasiu]

@alfabetaborzy: autentykujesz się?

[t.....2]

@alfabetaborzy co on ma scrapować?

[alfabetaborzy]

@Krasiu: w sensie że do czego mi autentykacja?
@tomek7912: chciałem sobie zrobić losowanie filmów z filmweba które chce obejrzeć, czysto hobbistycznie bo lubię w pythonie pisać i robic jakieś mini apki żeby nie wyjść z wprawy. Dodawać filmy do listy dodaje ale tylko z pierwszej strony. Tak jak wyżej pisali problem leży pewnie w SPA

[Krasiu]

@alfabetaborzy: Jak się nie zalogujesz to wyświetla tylko pierwszą stronę.

[alfabetaborzy]

@Krasiu: no i wszystko jasne. Wcześniej tego nie zauważyłem, dzięki.

[Krasiu]

@alfabetaborzy: np m8

[alfabetaborzy]

Autentykacja zrobiona, śmiga tak jak powinno