[przepyszna_frytka]

W jaki sposob mozna okreslic, w jaki sposob podzielic watki, by osiagnac najbardziej optymalne rozwiazanie?
Np jak w Apache Sparku podzielic executory by aplikacje smigaly najbardziej i zaosby byly najlepiej wykorzystywane?

#programowanie #python #apachespark #datascience

[wytrzzeszcz]

@przepyszna_frytka: nie znam się ale się wypowiem.

Skoro zysk to s+p/n gdzie s to stała cześć sekwencyjna a p to to się dało zrownoleglic na n procesorów.
Najlepiej by było zdaje się podzielić właśnie na n równych paczek. Dzięki czemu nie tracimy tyle czasu na zarządzanie samym zrownoleglic
Ale to taki tam teoretyczne pitu pitu

[przepyszna_frytka]

@wytrzzeszcz: ok dzieki

[wytrzzeszcz]

@przepyszna_frytka: lol tyłu programistów 15k i nikt nie odpowiedział na pytanie z działania pod spodem?

[dog_meat]

@przepyszna_frytka: odpowiedź jest oczywiście: to zależy. A zależy od charakteru pracy wykonywanej przez te wątki. Jeśli są to wątki CPU bound, nie ma sensu tworzyć ich więcej, niż masz dostępnych rdzeni

[przepyszna_frytka]

@dog_meat: no tutaj mi chodzi o kilkanascie serwerow pracujacych jako jeden xd

@wytrzzeszcz: wykopiwi programisci 15k byli w szkole ( ͡° ͜ʖ ͡°)

[dog_meat]

@przepyszna_frytka: te kilkanaście serwerów wciąż ma znaną liczbę rdzeni. Tak więc, jeśli są to zadania, które cały czas spędzają na obliczeniach, to wątków dalej nie powinno być więcej, niż rdzeni (uwzględniając inne procesy, które mogą potrzebować czasu procesora)

[d.....f]

@przepyszna_frytka: większa połowa najbardziej optymalnego rozwiązania przy cofaniu sie do tylu