@atomic77 tak to tylko zbieżność nazw, choć bardziej nazwą wzorowałem się na nakładce MKpower od Geodezy

@DEMONzSZAFY zakładając że pobieramy do PDF każdą i że każdy numer jest wykorzystany to daje nam około 6500 tb, ale można spokojnie założyć że 1/3 numerów jest niewykorzystana więc jeśli zarezerwujesz sobie 4000 tb to powinno Ci to spokojnie wystarczyć.

Przy pobieraniu do formatu json pierwszego działu, aby otrzymać relacje numer działki-kw to 10 tb, przy założeniu że 1/3 numerów nie ma księgi

@ikimrdbeietocytynal nie nazwałbym tego shackowaniem, opracowałem sposób na pobieranie KW z listy z pliku txt, z moich testów winika że ekw nie blokuje pobierania oraz dostępu do strony nawet przy pobieraniu 3000 KW jedna po drugiej i dodałem do tego generator poprawnych numerów KW jeżeli ktoś chciałby pobierać KW z jakiegoś zakresu.

Wiele osób pyta o plik exe, jest on w released pod tym linkiem:

https://github.com/Rzezimioszek/eKW-pobieracz/releases/tag/0.5

@debenek najlepiej z z pliku exe który jest w released, jest to najprostszy sposób https://github.com/Rzezimioszek/eKW-pobieracz/releases/tag/0.5

@314159 requirements.txt też muszę dodać

@Lewy91 opcja jest wyłączona, bo jej nie zaprogramowałem jeszcze, ale zamierzam to zrobić z następna aktualizacją, więc możesz spodziewać tego w przeciągu do tygodnia

@ChalwaWielkiejWolsce spróbuję wyłączyć grafikę, niestety mogę przyspieszać proces tylko do pewnego stopnia, bo jednak takie programy jak płatne C-GEO pobiera KW błyskawicznie, ale po około 10 księgach serwer blokuje program, bo uznaje go za bota

@Nalepiok razem z następnym updatem mam zamiar dodać plik pdf w którym będzie wszystko wyjaśnione

@zatracenie_czasu w requirements.txt są wymienione biblioteki pythona, natomiast to na jakiej wersji Chrome testowałem muszę gdzieś dodawać

@karnom nie testowałem na windowsie 7 lub niższym, ale wydaje mi się że nie powinien to być problem, lecz ręki sobie nie dam uciąć, jedynie w przypadku starszych systemów problemem jest jeśli system nie jest x64.

Btw. Widzę że piszesz pod postem dla wersji 0.5, nie wiem jaka pobrałeś, ale wersja 1.1 jest na githubie.

@WykopowyGeodeta też muszę pobierać księgi do zrid, stąd narodził się pomysł na program. Próbowałem korzystać z tego co oferuje C-Geo, ale to jakiś żart po 10 księgach się blokuj pobieranie

@WykopowyGeodeta używam glownie C-Geo wczytywania gml z EGiB, generuje z C-Geo wypisy z EGiB, eksportuje właścicieli działek, działki, użytki, inne dokumenty itp do xlsx. Zawiadomienia robię w Access. Modyfikacje gmli gesut i bdot robię w EWmapie, która super sobie z tym radzi, a rastry w EVR wczytują się mega szybko. Rozliczenie działek u mnie w firmie robi się w geomapie i z tego generuje raport, który następnie jest przerabiany w exceluPokaż całość

@its_over_for_chlop

Co do chrome to na niektórych komputerach się pojawia to okienko i masz rację muszę dodać flagę, więc jeśli Ci się pojawia to wybierz w zakładce ustawienia EDGE.

Z headless jest problem taki że powinno działać, a nie działa. Próbowałem na różne sposoby i nadal nie mam takiego który działa, sama flaga i ustawienie rozmiaru okna przeglądarki nie rozwiązuje problemu. Chyba będę próbować skorzystać z innej bibliotekiPokaż całość

@krzaczor93 proxy niepotrzebne. Aby pobrać wybierz dokładnie taki zakres, ustaw parametry ostatnie cyfry i kontrolnej i wybierz zapis do jsona i xlsx, dział 1-O, w ten sposób pobierze Ci tylko dział pierwszy do tych dwóch plików i tak jak komuś wyżej pisałem możesz wten sposób na bieżąco przeszukiwać jsona czy już się trafił ten numer działki który chciałeś, ewentualnie poczekać aż się cześć pobierze zapauzowac i przeszukać arkusz excelowy. A IPokaż całość

@szwondel szczerze to nie mam pojęcia, zakładanym że nie, ale nie jestem kompetentny aby to zagwarantować

@Gartosz wpisałeś też ostatnia cyfrę? Bo to działa tak że oba warunki są brane pod uwagę lub żaden jeśli jednego brakuje, może to błąd z mojej strony

@Gartosz to muszę w następnym upadacie zrobić aby dało się wybrać tylko jeden warunek, a podstawowe dane to zapis do json (wyszukiwanie) lub CSV, wedle uznania

[1.1A]
Mały update pod tym samym linkiem @Gartosz poprawiłem i teraz działa oboma parametrami lub jednym,

@its_over_for_chlop dodałem flagę do chrom i nie ma już tego wkurzające go okienka

@Horvath zawsze to się pojawia czy po jakieś ilości sprawdzonych ksiąg

@Horvath sprawdzałem teraz u siebie na telefonie i się nie pojawiło mimo kilku prób, ale zapewne będzie się to pojawiać i będę musiał poszukać jakiegoś sposobu na obejście tego zabezpieczenia

@za57o jeśli chodzi o wygenerowaną listę to może być taki błąd, pobieranie z tymi parametrami działa poprawnie. Jest to Bug do poprawki

@ozzi91 starostwo ma obowiązek wydać dane w formacie gml inne formaty są dodatkiem

@recc ta wersja tylko zmiana kolorystyczna, mam sporo rzeczy do dodania do programiku, więc nie chce dodawać czegoś co jest w połowie

@BennyLava @Ignas1415 Kod może i słaby, ale kto robi dobry? Btw spokojnie do wersji 10.0 wszystko się poprawi, najważniejsze że działa jako tako.

@Rad-X do pełnoletnich też ( ͡º ͜ʖ͡º)

Czas może wyjaśnić skąd ta nazwa, otóż sam już nie pamiętałem o pobieraczku, a program nazywał się pobieracz, natomiast po komentarzu mirasa @dobre_ziajty stwierdziłem, że to świetny pomysł, bo trochę to przypomni o tej niesławnej stronie i śmieszy mnie taki humorek, serdecznie pozdrawiam mirasa który to wymyślił niech Ci się wiedzie

@papaj42 rozumiem, że tak się tego nie powinno robić?

@papaj42 okej czyli Selenium to nie jest dobra opcja, inne UI to jest jakaś opcja oraz najważniejsze to zmiana języka, jaki język według Cb będzie do tego najlepszy? C#, a może Java?

@recc dodałem mini update do wersji 1.0 pod tym samym linkiem teraz jest wersja 1.0a, która ma dodane browser.quit(), bo wyczytałem że samo zamknięcie okna przeglądarki, bez quit może być powodem nie usuwania plików tymczasowych. Mam nadzieję że choć trochę rozwiąże to problem

@nalogowiec może być problem z zapisem jednego z nowo dodanych formatów jeśli któryś z nich masz zaznaczony w wersji 1.0a

@nalogowiec pomyślę o jakimś trybie minimum i odświeżeniu w przypadku błędy, natomiast możesz już teraz w ustawieniach wybrać opcję aby nie lądowało grafik na stronie, bo zawsze to jakaś oszczędność pamięci

@RZM_4

@RZM_4

@Dzieciok

zabezpieczenia jakieś niby są, ale przy pobieraniu kilku na raz pobiera asynchronicznie więc nic się nie dzieje natychmiast, a w przypadku pojedynczej po prostu czekam po 2-3 sekundy między klikami.

Odnośnie Capchy to od dawna jej nie ma na tej stronie

@affairz dokładnie mam pomysł wykorzystać to co napisał ten Mirek i tak w pierwszej kolejności chce zrobić generowanie listy parametryczne, a następnie zrobić właśnie ten tryb detektywa, który po wpisaniu numeru działki wydobywa te informacje ze stronki typu ekw.plus, z informacji jest generowana lista z parametrami, która następnie ma sprawdzane jakie działki są w dziale pierwszym tych ksiąg i jeżeli jest Match to księga zostanie dopiero pobrana i w ten sposóbPokaż całość

@affairz oczywiście może jest lepszy sposób lub samo generowanie listy wielu ludzia wystarczy, ale próbować warto

@affairz z moich obserwacji turbo pobieranie i ilość pobieran jednoczesnych na 5 najlepiej się prawdza

@TarnowskiMentor jakich konsekwencji? przecież to ogólnie dostępne dane, możesz przecież ręcznie przeklinać każdą księgę jaka istnieje

@toshibaas ekw ma od lat problem z zamianą przycisku kasowania i wyszukiwania, więc równie dobrze mogą nie przywrócić captchy bo tak, a czemu usunęli kto ich tam wie

@TarnowskiMentor obecnie nic

@RZM_4: PS. dodałem prostą instrukcje obsługi w PDF, jak będę miał czas to zrobię ją mniej chaotyczną

@Horvath ostatnio próbowałem aby wcale nie wyskakiwało okno i to nie daje dobrego efektu, będę spróbuję z minimalizacją. Gdy ja chcę pobierać i korzystać to korzystam z PowerToys od Microsoftu i skrótem windows+ctrl+T blokuje okno z którego korzystam na wierzchu wtedy wszystko wyskakuje po tym oknem. Jest to jednak rozwiązanie na około i dlatego będę chciał coś z tym zrobić. Btw. Nie napisałem ale w tej wersji da się pominąć ściąganiePokaż całość

@lukecz z tego co piszesz to musiał pojawić się błąd podczas otwierania działów księgi, plik json oraz CSV są generowane na podstawie wstępnych informacji przed wejściem w treść księgi. Program powinien następnie wejść w treść księgi jeśli taka istnieje, a następnie je pobrać. Treść o poszczególnych działów powinna być widoczna podczas pobierania. Nie wiem z jakiego powodu pojawia się u Ciebie błąd i ewentualne otworzenie błędu będę próbował robić jutro naPokaż całość

@lukecz sprawdziłem na wirtualnej maszynie i pobiera pdf, ale nie dawało mi to spokoju i zrobiłem nową wirtualną maszynę bez chroma i tam przez edge nie pobiera tylko próbuje przez sam silnik chromium i to nie działa, następnie zainstalowałem na czysto chrom i zaczęło działać. Więc jeśli masz chrom to spróbuj zaktualizować, a jeżeli nie masz do mimo moich prób edge jako alternatywy nadal jest on wymagany, natomiast wiem już jakiPokaż całość

@Iandschaft jeśli znasz numer księgi to tak, dostęp do ksiąg jest otwarty od dawna

@mtosny do tej pory pobrałem kilka tysięcy ksiąg i nic takiego się nie wydarzyło

@mtosny zresztą Mirek @KobyleCaco pisał pod poprzednim postem, że włączył programik na 24h i nie było problemów, więc może coś się zmieniło od strony ekw.ms.gov.pl

@mtosny zrobić coś takiego byliby super, ale nie wiem czy mam tyle umiejętności i czasu. Na ten moment nie wykluczam rozwoju w tym kierunku, lecz to nie mój priorytet

@affairz z pierwszego linku GitHub pobierasz zip I tam wszystko jest, to ma około 100 mb więc nie powinno być problemów z popraniem

@Tommy__ może to być problem z biblioteką python-vlc , czy aplikacja się uruchomiła czy później się pojawił problem?

@Tommy__ będę musiał wyłączyć opcję związane z muzyką, bo nie mogę wymagać aby do takiej pierdoły jak muzyka w tle każdy miał zainstalowane VLC

@Tommy__ pobierz ponownie, pod tym samym linkiem jest wersja z usunietą muzyką, zobacz czy działa jeśli masz możliwość

@Tommy__ bez muzyczki się obejdzie, więc może w następnej wersji wrócić z inną biblioteką do muzyki lub spakuje plik dll wymagany od VLC, no nic podminilem plik teraz nie powinno być z tym problemów

@HighFlyingBird potencjalnych numerów ksiąg jest okolo 32 000 000 000 z czego większość to wolne numery i pobranie takiego zbioru jednym komputerem zjaleoby około 2 576 388 dni przy założeniu że każda księga istnieje, więc w praktyce mogłoby to być nawet 4 razy szybciej, jedna księga przy optymistycznym założeniu jakie przyjąłem to 7 sekund. Więc aby móc to zrobić należaloby pobierać więcej ksiąg na raz niż 5 przez więcej niż 1Pokaż całość

@Tommy__ wiem już zwykle wrzucałem sobie to na virtualke, ale nie chciało mi się tego na laptopie robić, bo sobie tylko sklejałem to przez tydzień wymyśliłem

@ChamskoCytuje w tej brzydocie jest coś pięknego

@pieknylowca powiedziałbym, że lepsza nazwa nie mogła się zwolnić ( ͡º ͜ʖ͡º)

@mk321 @Itslilianka na użytek prywatny faktycznie po grzyba, ale w pracy wiele osób musi pobierać takie rzeczy czytać, załączać wydruki ze strony do dokumentacji itp.

@GOHAN pod plik nic nie ma

@affairz kod jest dostępny na githubie i jest to to samo co w exe, więc jeśli żadna z bibliotek które używam nie jest zainfekowana, a nie używam żadnej nietypowej, to chyba Avast jest nadgorliwy. Ewentualnie jeśli Ci się chce możesz sam skomplikować exe I czy będzie ten sam efekt

@syn_admina jeśli boisz się pliku exe to już jesteś niewolnikiem systemu (windows), a tak serio kod jest dostępny na githubie, jak chcesz możesz odpalić bezpośrednio z nieskomplikowanego pliku