Wszystko

Najnowsze

Archiwum

AnonimoweMirkoWyznania
  • 1
#anonimowemirkowyznania
Jak wygląda azjatycki rynek pracy dla big data developera? Gdzie uderzać biorąc takie czynniki jak: zarobki/warunki/możliwości?

#programowanie #programista15k #it #kariera #azja #chiny #korea #japonia #tajwan #singapur #praca #korpo #python #bigdata

Kliknij tutaj, aby odpowiedzieć w tym wątku anonimowo
  • 1
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach
Meriu
  • 0
Mirki, mam pytanie początkującego, z którym w jakiś niepojęty dla mnie sposób nie jestem w stanie sobie poradzić.

Czy Spark albo Kafka same w sobie magazynują przetwarzane dane i w każdym momencie mogę się do nich odwołać? Załóżmy, że za pomocą Sparka łączę się z bazą i wykonuję transformacje do analityki. Czy na końcu pipeline zawsze musze załadować te dane to hurtowni bo po zamknięciu joba one przepadną? Jak nazywa się ten
  • 6
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach
y.....l
y.....l
  • 0
Jako źródło danych, czy jako cel, czy jako oba


@Meriu: Możesz korzystać w oba sposoby.

Ja w jednym projekcie miałem tak:

rabbitMQ -> hadoop -> spark -> kafka -> spark -> hadoop -> spark -> hadoop
  • Odpowiedz
rybe
  • 1
Miry, rozważam studia podyplomowe związane z big data, czy ktoś jakieś robił i może polecić albo odradzić?
#bigdata
  • 1
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach
bp-lukasz
  • 68
◢ #ainews ◣
Cześć! Zapraszam na czternaste zestawienie najciekawszych linków ze świata sztucznej inteligencji

1. New AI strategy enables robots to rapidly adapt to real-world environments
https://engineering.berkeley.edu/news/2021/07/rapid-motor-adaptation-enables-robots-to-navigate-real-world/
INFO: Nowy algorytm (RMA) dla psów-robotów, dzięki któremu doskonale radzą sobie w różnych niestandardowych środowiskach i potrafią się bardzo szybko adaptować do zmiany tych środowisk. Polecam zerknąć na filmik - na mnie wrażenie robi poruszanie się po pochyłym materacu oblanym olejem
bp-lukasz - ◢ #ainews ◣ Cześć! Zapraszam na czternaste zestawienie najciekawszych li...

źródło: comment_1627541975IIaPQvRLCHzuBENpUMnmQ1.jpg

Pobierz
  • 3
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach
Zekkeh
  • 2
Cześć, wybieram się na studia magisterskie i wpadły mi w oko dwa kierunki na PJATK:
1. Data Science
2. Inżynieria oprogramowania, procesów biznesowych i baz danych

Pracuję obecnie jako analityk, więc cisnę Excela, VBA, Pythona + trochę zajmuję się SAPem. Na pewno chciałbym zawodowo pozostać w szeroko pojętej analityce i grzebaniu w danych. Większości rzeczy uczę się sam, więc studia potrzebne są mi tylko dla dyplomu i możliwości objęcia poważniejszego stanowiska. Mimo
  • 4
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach
Shinlim
Shinlim
  • 1
@Zekkeh: Generalnie nie mam pojecia jak wygladaja dokladnie te kierunki ktore rozpatrujesz, ale wiem ze okolo 5 lat temu ta szkola stala na bardzo wysokim poziomie. Wykladowycy byli wzglednie mlodzi i uczyli rzeczy ktorych sie uzywalo na rynku w danym czasie. Nie wiem jak teraz, ale a moich czasow mimo wszystko uwazam, ze ponad 1k miesiecznie to przesada, nawet jak za prywatna uczelnie. Za to wiem, ze pare osob z
  • Odpowiedz
Zekkeh
  • 0
@Shinlim: Dzięki, czekałem na taką odpowiedź ( ͡° ͜ʖ ͡°) Chciałbym przy okazji robienia papierka, nauczyć się jak najwiecej. Jeśli chodzi o Big Datę to tylko PJATK ma tak ciekawe kierunki. Na SGH się nie dostałem, bo decydowała kolejność zgłoszeń i ludzie, którzy zgłosili się 51 sekund po otwarciu rekrutacji byli odrzucani bo już miejsc nie było XD
  • Odpowiedz
bp-lukasz
  • 40
◢ #ainews ◣
Cześć! Zapraszam na trzynaste już zestawienie najciekawszych linków ze świata sztucznej inteligencji

1. AI projektuje eksperyment kwantowy wykraczający poza ludzkie możliwości.
https://www.wykop.pl/link/6179181/ai-projektuje-eksperyment-kwantowy-wykraczajacy-poza-ludzkie-mozliwosci/
INFO: Dodaję link wykopowy - pod spodem możemy przeczytać przy okazji co na ten temat myślą wykopki (✌ ﾟ ∀
bp-lukasz - ◢ #ainews ◣ Cześć! Zapraszam na trzynaste już zestawienie najciekawszych...

źródło: comment_16258220803ELGWdZkSOOebZ3YumuEA5.jpg

Pobierz
  • 2
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach
lizak21
lizak21
  • 0
#bigdata #informatyka

Wiem że Cloudera zamknęła swoje repozytoria i tylko teraz można pobrać jeśli ma sie wykupiony support. Gdzie mogę znaleźć paczki rpm pod redhat do nowych wersji Cloudery ? jakieś torrenty?
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach
bp-lukasz
  • 52
◢ #ainews ◣
Cześć! Zapraszam na dwunaste już zestawienie najciekawszych linków ze świata sztucznej inteligencji

1. Copilot - narzędzie, które powstało dzięki współpracy Github i OpenAI
https://copilot.github.com/
INFO: Narzędzie wspomaga programistów w pisaniu kodu - potrafi na podstawie kontekstu / komentarza / nagłówka funkcji zaproponować odpowiednią implementację. Przyznam, że jeśli to rzeczywiście działa tak jak pokazali w przykładach, to jestem w szoku.
bp-lukasz - ◢ #ainews ◣ Cześć! Zapraszam na dwunaste już zestawienie najciekawszych ...

źródło: comment_1625211134Cn1nKneYIV895PHd5Cuy83.jpg

Pobierz
  • 9
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach
bp-lukasz
  • 48
◢ #ainews ◣
Cześć! Zapraszam na jedenaste zestawienie najciekawszych linków ze świata sztucznej inteligencji

1. Quantum Machine Learning and the Power of Data
https://ai.googleblog.com/2021/06/quantum-machine-learning-and-power-of.html
INFO: Era komputerów kwantowych zbliża się do nas nieubłaganie. Czy będzie to rewolucja dla świata sztucznej inteligencji? Dosyć ciekawy i krótki artykuł na ten temat prosto ze stajni Google AI
bp-lukasz - ◢ #ainews ◣ Cześć! Zapraszam na jedenaste zestawienie najciekawszych lin...

źródło: comment_1624521625hL3Gu9v1uWZTEgHFwxbTDl.jpg

Pobierz
  • 7
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach
bp-lukasz
  • 72
◢ #ainews ◣
Cześć! Zapraszam na dziesiąte zestawienie najciekawszych linków ze świata sztucznej inteligencji

1. Reverse Engineering Deep Fake
https://ai.facebook.com/blog/reverse-engineering-generative-model-from-a-single-deepfake-image/
INFO: Facebook opracował własny deep fake detector. W artykule można zobaczyć jaką architekturę zastosowano i jakie są
bp-lukasz - ◢ #ainews ◣ Cześć! Zapraszam na dziesiąte zestawienie najciekawszych lin...

źródło: comment_1623917612LQN5vEZr577n6vEeRyGEtn.jpg

Pobierz
  • 8
  • Odpowiedz

  • Otrzymuj powiadomienia
    o nowych komentarzach

Powiązane tagi