#azure #pyspark #scala #dataengineering #programowanie

Czy ktos mi podpowie czemu scala zostala zepchnieta (przynajmniej z tego co czytam i widze w necie) na drugi plan jako jezyk sparka? Przeciez to jego natywny jezyk?

Tu pytanie do osob siedzacych w Azure i robiacych na nim DE:
Czego sie teraz najwiecej uzywa? PySparka? SparkSQL? Jesli tak to dlaczego? W czym piszecie notebooki?
Trele_Duperele - #azure #pyspark #scala #dataengineering #programowanie

Czy ktos mi ...

źródło: image

Pobierz
  • 7
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@Trele_Duperele: scala umiera śmiercią naturalną
-python jest bardziej przyjaznym i uniwersalnym językiem od scali, dominującym w ekosystemie AI i data. Ogromna liczba bibliotek pod każdy typowy problem w DE i data analytics sprawia, że deweloperzy wolą pracować z pythonem.
-dla większości zastosowań w data engineeringu i analityce używanie scali nie ma żadnej wartości dodanej albo ma minimalną
-dużo łatwiej wdrożyć kogoś do pysparka. Absolwenci kierunków IT mają np podstawy pythona i pandas
  • Odpowiedz
Jeszcze z niecałe pół roku i dobiję autem do 100 tys. przebiegu (obecnie 90 tys, odebrane w połowie 22').
I ostatnio znajomy do mnie z tekstem - ale do 200 tys. nie dobije, silnik sie rozleci. Błąd. Chodzi o silnik 1.0 MPI 60 KM.
Tak się składa, że wujek ma Fabię z 2016 z tym samym silnikiem (w wersji 75 KM) i ma przejechane 740k km. A jeden kolega, który ma Scalę
  • 19
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@AdamF_OG: typowe myślenie, że nowe silniki się psują a tym czasem wszystkie służbowe auta z grupy vag z 1.0 tsi i mpi na służbówkach mające bardzo ciężkie życie.
  • Odpowiedz
@Rustyyyy: Ja mam swojego Ceeda od nowości. 1.4 TGDI więc prawilna benzynka ;) Nie jest to szał pępka, wiadomo rodzinny dupowóz. Ale generalnie nie mam z nim problemów, jeździ, skręca i hamuje. Wnętrze spoko, nic się nie sypie, fotel kierowcy widać jakieś oznaki zużycia bo materiał, ale nie przetarł się jeszcze :D Plastiki spoko, nic nie skrzypi, nic nie piszczy. Prowadzi się spoko jak na takiego nudnego kuciapa, wyposażenie ma,
  • Odpowiedz
Jadę w przyszłym tygodniu na pierwszą wymianę oleju do ASO w swojej #skoda będę to robił oczywiście z własnej kieszeni, ale mam mały odprysk na szybie po uderzeniu kamienia gdzieś na trasie, czy przyczepią się do tego? Będą mi kazali to robić na miejscu żebym nie stracił gwarancji czy coś? Nie chce wymieniać całej szyby bo odprysk ma wielkość dwugroszówki i zrobię to sobie u jakiegoś szklarza na wiosnę. Jak
  • 13
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@siemawpadajdomejkuchni ahhh, mi to zrobili od ręki ale też pamiętam że robiłem to jak było ciepło. A jak nie dzieje się nic to super. Oddać na zalanie i będzie funkiel nówka - w aso się nie przyczepia
  • Odpowiedz
@pan_bogus: Krytyczne elementy Kafki są w Scali, to co "dookoła" jest w Javie.

Podobnie na Scale, teraz raczej kto może to się wycofuje ze Scali


@pan_bogus: To jest pewnie najlepszy moment, żeby zacząć ogarniać Scalę, jak ktoś jeszcze nie umie XD To potężny język prawdopodobnie jedyny w swoim rodzaju na obecnym rynku. Ciężko mi sobie wyobrazić, żeby taki język zniknął z rynku. Po prostu hype minął, a raczej
  • Odpowiedz
Patrz jak to idzie, to się nie zatrzymuje, to nie chce zwalniać, nie ma o----------a. Ale to idzie. #pdk

Nie mogę się doczekać przesiadki do już zamówionej Skody Scali z silnikiem 1.0 TSI 95 KM (de facto 100 KM). Waga tylko o nieco ponad 10% więcej względem obecnego auta, a 60% koni więcej niż obecnie (teraz 60 KM) i ponad 80% momentu obrotowego więcej niż obecnie (175 Nm vs 95
A.....z - Patrz jak to idzie, to się nie zatrzymuje, to nie chce zwalniać, nie ma o--...
  • 60
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@Adamfabiarz:

95 KM vs 60 KM i 175 Nm vs 95 Nm


To już nie przelewki. Wiem coś o tym, w moim 82 KM i 160 NM, do tego napęd na tył i na mokrym elektronika ma co robić ( ͡° ͜ʖ ͡°)
  • Odpowiedz
#skoda #scala to takie auto, o którym może kiedyś słyszałeś, ale nie do końca wiesz jak wygląda. To auto, które może być ciekawostką w gamie czeskiego producenta, ale raczej nie ze względu na niesamowitą karoserię lub silnik.
Ot kolejny kompakt, który łączy to Skoda ma najlepsze - wielką kabinę pasażerską, dużą gamę silników i cenę, która już niebezpiecznie rośnie.

Więcej o aucie znajdziecie tutaj - KLIK

#samochody
stopaotestuje - #Skoda #Scala to takie auto, o którym może kiedyś słyszałeś, ale nie ...

źródło: Skoda ScalaFL (19)

Pobierz
  • 11
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@pan_bogus: który inny język na JVM ma taką ekspresywność i tak mocny system typów oraz tak dobre wsparcie dla FP? Scala to jest zarąbiście dobrze zaprojektowany język idealny do przetwarzania dużych ilości danych.
  • Odpowiedz
Kotlin had a chance to avoid this mistake but didn't take it.


@Krever kotlin jest mocno kompatybilny z javą w obie strony (a nie jak scala, że tylko w jedną) przez co annotowane nulle były logicznym rozwiązaniem. Co do Scali to nie wiem jak się teraz pisze, ale w czasie mojego krótkiego romansu na studiach było tak jak w Javie (tj, mogę sobie zrobić return null), więc Kotlin wypada tutaj
  • Odpowiedz
  • 0
@Saly:

xd. Less cryptic chyba, że nie masz totalnie pojęcia (jak ja) co to robi

Chodziło mi o to, że TODO jest less cryptic od ???.

Co do nulli to w scali 3 weszlo explicit nulls i to powinno dac dosc duzą pewność poprawności. Ale szczerze mowiac w Scali nulli sie praktycznie nie widzi bo wszyscy probuja uzywac natywnych bibliotek (gdzie nikt nulli nie uzywa) albo sie silnie wrapuje
  • Odpowiedz
Jak się Wam spisuje 1.0 TSI 110KM + DSG w budzie podobnej jaką ma Skoda Scala? Bo zastanawiam się czy warto dopłacać do 1.5 150KM skoro 80% będę jeździć po mieście i drogami powiatowymi.
#skoda #scala #volkswagen
  • 4
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

#programista15k siema, powoli przymierzam się do zmiany języka ze #scala na #python i stąd moje pytanie. Ma ktoś jakiś kurs do polecenia który wprowadzi w język i wszystkie jego zakamarki ale bez łopatologicznego wyjaśniania ala kurs from zero to hero np czym jest string itp itd.

Musze przeskoczyć na pajtona bo swoje co mogłem to zarobiłem na klepaniu #dataengineering w Scali i teraz 85-90%
  • 14
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@programistalvlhard: szkoda czasu na kursy, postaw sobie środowisko i wskakuj w dokumentacje frameworków, tensorflowy, numpy czy co to się tam w tym datascience używa, moim zdaniem szybciej i lepiej to ogarniesz, a doku będziesz musiał przeczytać prędzej czy później tak czy siak
  • Odpowiedz