[AldoAldo]

Mirki ma ktoś scrappera do olx pobierającego cenę i powierzchnię mieszkania, albo chciałby zrobić lub pomóc mi zrobić? (Ogarnę na tyle że ściągnę te dane z linku z ogłoszeniem, ale nie ogarnę jak zrobić to tak by 'wbijalo' na każde ogłoszenie i stamtąd ściągało dane. )

#programowanie #scraping #python #scrapy #webdev

[wellfix]

@AldoAldo: jak znajdziesz rozwiazanie na swoj problem gdzies w internecie to mozesz podeslac bo tez jestem zainteresowany tematem.

[barteb]

@AldoAldo: W czym konkretnie problem? Jak umiesz znaleźć interesujące cię na stronie dane to umiesz znajdować też linki. Startujesz od wyszukiwania, znajdujesz linki do wyszukanych ogloszeń i do przejścia na następną stronę.Po kolei wysylasz na ogloszenia requesty i znajdujesz interesujace cie dane. Jak przejdziesz wszytko to idziesz na nastepna strone (w jakis sposob pomijasz juz raz obejrzane ogloszenia, np. zapisując gdzieś już odwiedzone linki)

[l.....k]

@AldoAldo: podaj co masz zobaczę rano

[F.....k]

@AldoAldo: użyj mózgu pozdrawiam człowiek używający mózgu

[asterix61]

@AldoAldo: Tylko jeżeli nie masz doświadczenia, to poczytaj o tym jak uchronić się przed banem. Na jednych warsztatach uczyłem grupę 10 osób scrapowania serwisu aukcyjnego i następnego dnia cały budynek miał na niego bana xd

[l.....k]

@AldoAldo: i co? pokażesz kod co już masz?

[AldoAldo]

@luukasek w pt będę przy swoim kompie to podeślę , ale załatwiłem to na dany moment wtyczka do chrome (xd)

[l.....k]

ja juz na py mam w 75% zrobione :)

[Ilythiiri]

@AldoAldo: @wellfix: Jak coś to jestem w stanie wykonać dla was taki skrypt. Robiłem już kiedyś coś podobnego właśnie pod OLX.

Kwestia czy jesteście zainteresowani i czy jesteście skłonni zapłacić. Ja niestety pracuję głównie w #selenium, ale jeśli jest to możliwe (nie zawsze jest) to jestem otwarty na inne technologie. Język programowania oczywiście #python.

Ewentualnie czy byłoby zainteresowanie stworzeniem strony która zbierała

[wellfix]

@Ilythiiri: jestem zainteresowany nauka by coś takiego wykonać, sam skrypt na wiele mi się nie zda

[dziekuje]

@AldoAldo: @wellfix: Ogarnąłem coś takiego, z czym dokładnie masz problem?

[Groosik]

@asterix61: masz może jakieś artykuły albo cokolwiek na ten temat, które mógłbyś polecić?

[asterix61]

@Groosik: Gdzieś w zakładkach powinienem coś mieć, przypomnij się jutro to znajdę, bo jakiś czas temu miałem coś typu "O zajebiste! Do zakładek" w tym temacie

[l.....k]

@Groosik: @AldoAldo: @wellfix
tu macie cos gotowe:
co robi?

sprawdza ilosc stron z nieruchomosciami

z kazdej strony

[Groosik]

@asterix61: przypominam się

[PiersiowkaPelnaZiol]

@Ilythiiri: z ciekawości jaka cena? Albo inaczej ile za mentoring?

[Ilythiiri]

@PiersiowkaPelnaZiol: Przykro mi, nigdy nie prowadziłem "mentoringu" - poza pomocą i o-----------m kolegów młodszych stażem w biurze. Ponadto uważam, że z programowaniem jest jak z jazdą na rowerze - mentorzy i trenerzy niewiele pomagają, musisz się nauczyć sam to robić.

[PiersiowkaPelnaZiol]

@Ilythiiri: kurcze szkoda. Bo szukam kogoś takiego. Na pewno cię nie interesuje?

[Ilythiiri]

@PiersiowkaPelnaZiol: Na pewno, nie mam czasu, mam w opór roboty, nadgodziny i bywa, że robię po nocach dodatkowe zlecenia. ( ͡° ʖ̯ ͡°)

Jeśli robiłeś coś wcześniej to pisz do mnie albo pod tagiem (możesz mnie wołać) z konkretnymi problemami. Umiesz w ogóle programować czy chcesz się nauczyć?

[PiersiowkaPelnaZiol]

Umiesz w ogóle programować czy chcesz się nauczyć?

@Ilythiiri: W sensie, ogarniam co nieco, ale raczej pracuję na support i uczę się administrowania.

chciałem po prostu napisać scrapera na Gumtree by mi wyszukiwał pokoje w krioawie ;p.