kodi1911
scrapowanie przeszlo pomyslnie, 2793 strony głównej z wykopaliskami, komentarzami, odpowiedziami do komentarzy + hashtagi, zawołania, nawet kolor nicka udało się wyciągnąć - łącznie jakieś 3,5gb danych do analizy ( ͡° ͜ʖ ͡°)

teraz pora na oczyszczenie danych i text mining komentarzy na wykopie ( ͡° ͜ʖ ͡°)

#dataisbeautiful #machinelearning #statystyka #python #apachespark #bigdata
41
  • Najlepsze
  • Wszystkie komentarze
kodi1911
@morsik: wystawia, ale chciałem pobrać wszystko za jednym zamachem, zeby to wrzucić później do sparka
@gorush: całkiem niedawno analizowałem treści artykułów wyborczej, naszego dziennika i super expressu - łącznie jakieś 50 tys. artykułów, zrobiłem aplikację z podsumowaniem wyników tej analizy
http://104.154.23.20:3838/PolishMedia/
10
Kajakiem_przez_Tybet
@morsik: No raczej nie. Skończyłby Ci się limit, poza tym API nie udostępnia wszystkiego, co jest na stronie
8
Kajakiem_przez_Tybet
#graotron #dataisbeautiful
Jak można tweetować podczas oglądania serialu ( ͡° ͜ʖ ͡°) A na wykopie ile było wpisów?
1
  • Najlepsze
  • Wszystkie komentarze
K.....o
K.....o
@Kajakiem_przez_Tybet: ludziska lubia atencje
0
k.....m
k.....m
#kartografiaekstremalna #mapy #dataisbeautiful #mapporn #religia #usa

Jaka religia byłaby najpopularniejsza w danym hrabstwie, gdyby wyprowadzili się stamtąd wszyscy chrześcijanie? #
10
  • Najlepsze
  • Wszystkie komentarze
k.....m
k.....m
A tutaj wszyscy zostali w domu:
4
stahs
Treść przeznaczona dla osób powyżej 18 roku życia...
1
  • Najlepsze
  • Wszystkie komentarze
k.....m
k.....m
Treść przeznaczona dla osób powyżej 18 roku życia...
15
D.....n
Moje trasy z chodzenia i biegania w Krakowie od 2013 do 2016 roku.

W komentarzu mapka z podziałem na lata. Tutaj długi tekst o tym jak zrobiłem mapki gdyby ktoś też chciał próbować.

Statystyki:
2013 - 1544km - 12 dni - 569
26
  • Najlepsze
  • Wszystkie komentarze
stahs
Sprzedaż gry Jenga w USA...


#ciekawostki #dataisbeautiful #z--------------a
82
  • Najlepsze
  • Wszystkie komentarze
gorfag
4
  • Najlepsze
  • Wszystkie komentarze
R.....x
R.....x
Chcesz się nauczyć programować? A może tworzyć gry... albo tworzyć muzykę rysować?

Lecz zawsze wydawało ci się, że się do tego nie nadajesz? Że brakuje ci talentu, inni są lepsi, że to bez sensu?
A może problemy z motywacją?

A może już się uczysz, ale nie widzisz efektów, albo te efekty są bardzo małe?
92
  • Najlepsze
  • Wszystkie komentarze
InformacjaNieprawdziwaCCCLVIII
3
jooj
jooj
#dataisbeautiful #mapporn #policja #kalkazreddita
Liczba policjantów na 100 000 mieszkańców.
9
  • Najlepsze
  • Wszystkie komentarze
InformacjaNieprawdziwaCCCLVIII
Ranking neutralnych płciowo imion w USA.

(Jeżeli zamiast wykresu widzisz zegarek, kliknij tu).

#ciekawostki #imiona #murica #usa #dataisbeautiful
6
  • Najlepsze
  • Wszystkie komentarze
Mesmeryzowany
15
  • Najlepsze
  • Wszystkie komentarze
jooj
jooj
#mapporn #dataisbeautiful #oze #kalkazreddita

W porównaniu z wieloma miejscami na ziemi, Polska ma dobre warunki na energetykę wiatrową.
10
  • Najlepsze
  • Wszystkie komentarze
jooj
jooj
#dataisbeautiful #mapporn #statystyka #kalkazreddita #lotnictwo
Liczba lotnisk w każdym kraju
78
  • Najlepsze
  • Wszystkie komentarze
InformacjaNieprawdziwaCCCLVIII
Treść przeznaczona dla osób powyżej 18 roku życia...
60
  • Najlepsze
  • Wszystkie komentarze