[Addis]

MIRUNKI KOCHANE, ogarnia ktoś może Sparka w Javie? Mam do zrobienia algorytm K-MEANS i pomimo usilnych prób postawienia tego środowiska od 5 godzin nie chce mi działać przykładowy kod i już nie mam pojęcia o co chodzi ;///

KOD: https://pastebin.com/ncG3vvyz

#spark #scala #java #programowanie

[Ark00]

@Addis: jaki problem wyrzuca?

[Addis]

@Ark00: no właśnie nic, kompiluje się i nic nie wyświetla, a powinien to

Within Set Sum of Squared Errors = 2521.96491228072
Cluster centers:
[74.42105263157895]
[42.666666666666664]

No i robi test runs: 0, więc tak jakby w ogóle nic nie robił...

[Ark00]

@Addis: test runs: 0 mówisz? Chodzi Ci o builda w mavenie/sbt/gradle/cokolwiek innego?

[Addis]

@Ark00: builda w mavenie, test wygląda tak

package com.apache.spark.kmeans;

import org.apache.spark.api.java.JavaSparkContext;

/**
*
* @author Czarny
*/
public class Test {
private transient JavaSparkContext sc;



}

[Ark00]

@Addis: no i co ten test ma robić skoro nie masz metody z adnotacją @Test?

[Ark00]

@Ark00: jeśli to ma być test w junit

[Addis]

@Ark00: No właśnie nie mam, bo nawet nie wiem co w takiej metodzie miałbym wpisać, za bardzo

[Ark00]

@Addis: próbowałeś w ogóle odpalać ten program przez submita w sparku?

[Addis]

@Ark00: nie, tylko przez net beansa w mavenie

[Ark00]

@Addis: ok, jak chcesz to odpalić w sparku to musisz zbudować jara i odpalić go przez submit w sparku: bin/spark-submit https://spark.apache.org/docs/latest/submitting-applications.html Jara zbudujesz przez maven install

[Ark00]

./bin/spark-submit \
--class .Kmeans \
--master local[4] \
target/

Tyle pewnie styknie

[Ark00]

@Addis: up

[Addis]

@Ark00: i gdzie to wrzucić?

[Ark00]

@Addis w terminalu musisz to wywołać

[Ark00]

@Addis: oczywiście podmieniając wartości pod zgodne z projektem

[Addis]

@Ark00: oki, a tego jara w jaki sposób przez maven install? Jak klikam maven to jest opcja tylko Run w netbeansie

[Ark00]

nie wiem jak to zbudować z netbeansa, możesz w katalogu projektu z terminala odpalić mvn install albo mvn clean install jak chcesz zbudować z czyszczeniem projektu, tylko pewnie musiałbyś zmienne środowiskowe dla mavena ustawić

[Ark00]

@Addis: up

[Ark00]

@Addis: powinien domyślnie stworzyć folder target w którym powinien być też jar

[Addis]

@Ark00: ok już próbuję