Aktywne Wpisy
sergio91 +313
Dzisiaj w nocy różowa nie mogła zasnąć i się wierciła, obudziła mnie i powiedziała, że ma mi ochotę obciągnąć xd zrobiła to i poszła spac
#seks
#seks
Poniedziałek rano. Niechaj energii na resztę tygodnia doda wam widok sensualnej Anki ocierającej się o Alvaro 乁(♥ ʖ̯♥)ㄏ
#bachata #lewandowski #lewandowska #p0lka
#bachata #lewandowski #lewandowska #p0lka
Raczej mniej istotne tło problemu:
Tworzę sobie Wheela w #pythonie i do pełnego wykorzystania tej libki, którą zbuduje jest potrzebna inna libka udostępniana jako plik .JAR.
Lokalnie jak sobie z tym pracuje i odpalam kod w ramach mojego develpmentu na sparku to mam zwyczajnie załączony ten JAR w odpowiedniej lokalizacji i wskazuje go podczas budowania SparkSession. Tak jak na uproszczonym przykłądzie poniżej:
o odpowiednie dostarczenie tego pliku dba moj prosty skrypt bashowy, ktory sobie dany develper juz sam odpali pdczas konfigurowania lokalnego środowiska develperskiego.
No i teraz problem wlaściwy:
Chce zbudowanego przeze mnie wheela używać an databricksach. Żeby móc to zrobić muszę oprócz mojego zbudowanego wheela zaisntalować też ręcznie na klastrze wspomnianego JARa.
Jak podejść do tematu zarządzenia taką zależnością aby w przyszłości użytkownik nie musiał ręcznie instalować wspomnianego JARa na databricksowych clustrze?
Czy w ogóle byłoby to możliwe aby po instalacji mojego wheela z ADSL'a automatycznie też "dogrywała" się dodatkowa zależność w postaci zewnętrznego JARa z mavena na wybranym klastrze databricksowym? Chciałbym zdjąć tę odpowiedzialność z przyszłego użytkownika mojego pythonowego wheela.
Jak do tego tamatu możnaby podejść?
#apachespark #spark #databricks #python
#jvm (z racji tego, że potrzebuję wspomnianego JARa zaisntalowanego na saprkowym klastrze obok Pythonowego Wheela)
#programowanie
#azure (mam databricksy na cloudzie microsoftu - jeżeli może się to jakkolwiek okazać istotne)
@ProfesorBigos naprowadził mnie na rozwiązanie. Wystarczy dołączyć zależności do wheela, razem zbudować i je później wykorzystać. Dziękuję Panie Profesorze!