Web scrapping

Node.jsniezaleznie czy przy uzyciu selemnium/pupeteerchrome wykrywa, ze uzywam Bota, oczywiscie moge dac flage  Ale to tylko ignoruje pop-up a przegladarka i tak wie ze to "bot".I wchodzac na strone https://przegladarka-ekw.ms.gov.pl/eukw_prz/KsiegiWieczyste/wyszukiwanieKW?komunikaty=true&

Node.js
niezaleznie czy przy uzyciu selemnium/pupeteer
chrome wykrywa, ze uzywam Bota, oczywiscie moge dac flage 

ignoreDefaultArgs: ['--enable-automation'],

Ale to tylko ignoruje pop-up a przegladarka i tak wie ze to "bot".
I wchodzac na strone https://przegladarka-ekw.ms.gov.pl/eukw_prz/KsiegiWieczyste/wyszukiwanieKW?komunikaty=true&kontakt=true&okienkoSerwisowe=false

dostaje odpowiedz The requested URL was rejected. Please consult with your administrator. ;D

wie ktos jak sie z tym uporac ;D?

[sultan_de8ilow]

brakuje jakiegos headera, znajac zycie jezyk albo referer
headless: false w skrocie oznacza ze bedziesz widzial w przegladarce co sie o--------a a nie ze nie ma headerow

[tprazniewski]

@sultan_de8ilow: co do headless: false moze zle sie wyslowilem, ale mialem namysli doslownie to co mowisz ;D
Co do naglowkow to wlasnie nie do konca. Tu jest lista naglowkow z przegladarki ktora uruchamia pupeteer i nie wpuszcza mnie na dany link

[tprazniewski]

@sultan_de8ilow: a tu lista naglowkow ktore wpuszczaja ;D

[sultan_de8ilow]

a co leci w headersach? jaki masz ua ustawiony?

[tprazniewski]

@sultan_de8ilow: Od siebie extra tylko ustawilem
User-Agent: 'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/114.0.0.0 Mobile Safari/537.36';

zrobilem headless: false
Czyli pupeteer odpala mi nowa instancje Chrome z "widokiem apki" ;D
wchodze na https://ekw.ms.gov.pl/eukw_ogol/menu.do (normalnie strona