[programistalvlhard]

Siema, jutro mam pierwszą ever rozmowe techniczną na Big Data Dev'a. Macie jakieś porady, może pytania jakie występują ? Stack wymagany: Scala, Spark, Flink, Hadoop ( ogólnikowo bo nie wiem czy chodzi o hadoop czy o hadoop + frameworki) ale pewnie tak. Generalnie #!$%@? interview questions z google itp ale stack jest tak ogromny że przyswojenie tak dużej ilości wiedzy bez miesięcy praktyki jest ciężkie więc jedynie jak mogę odpowiedać to chyba teoria bo praktyka leży xd
#bigdata #pracait

[programistalvlhard]

@ciasteczkowy_monster: Jak mi zadadzą takie pytanie to grzecznie podziękuję xD

[negrep]

@Krever pomóż mireczkowi :)

[K.....t]

@programistalvlhard big data, to powinieneś wiedzieć jak sobie poradzić z tak dużą ilością ( ͡º ͜ʖ͡º)

[Godziu73]

@programistalvlhard: jaką książkę zabralby pan na bezludna wyspę

[programistalvlhard]

@Godziu73: Jak zakończyć rozmowę rekrutacyjną w 5 minut. Dobry tytuł xd

[r.....h]

@programistalvlhard: Naucz się Javy, Skali, Pythona i koniecznie Sparka. Wystarczy ( ͡° ͜ʖ ͡°)

[programistalvlhard]

@rith: Nie koniecznie :D Wszędzie jest hadoop. Czyli HDFS, YARN, Hive, Flume, Pig, Tez, MapReduce itp itd :D czytaj zniszczymy Cię na rozmowie pytaniami technicznymi xD

[Kresse]

@programistalvlhard: Hadoop to troche szerokie pojecie xD Naucz sie moze do narzedzi okolo-Sparkowych, czyli przede wszystkim HDFS i YARN. Oczywiscie jak dziala Map-Reduce tez wypadaloby wiedziec.

[programistalvlhard]

@Kresse: HDFS,YARN,MR,Scala,spark wystarczy? ( ͡° ͜ʖ ͡°)

[Kresse]

@programistalvlhard: Nie wiem :P Ale watpie, zeby pytali wnikliwiej z jakis tam Stormow, ZooKeeperow czy dziesiatek innych narzedzi.

[programistalvlhard]

@Kresse: łok dzięki

[r.....h]

@programistalvlhard: Generalnie wszędzie w wymaganiach piszą Hadoop, Pig, Hive, Yarn (i wypisują całego Hadoop Stacka) a na rozmowie pytają o Javę/Scalę/Sparka.

[programistalvlhard]

@rith: Ok :D, akurat hdfs i yarna przycisnalem mocno, mr nie potrzebuje bo jest spark tylko raczej koncepcje zeby znac

[Krever]

@programistalvlhard: Stack bardzo standardowy. Przede wszystkim powiedz jakie masz doświadczenie i czy interview jest na jakiś konkretny level(junior, mid, senior). Rekrutowałem na takie stanowisko przez ponad pół roku więc pewnie mogę jakoś pomóc. Jak ogłoszenie jest publiczne to też możesz podesłać, może uda się coś wywnioskować z opisu albo znam firmę i coś podpowiem.

[programistalvlhard]

@Krever: Hej, napisałem PW :D Chętnie się dowiem tego i owego :D

[Krever]

Ja zawsze sprawdzałem zrozumienie środowiska hadoopowego, tzn czy wiesz jak ze sobą współpracują poszczególne elementy. Tzn musisz wiedzieć że na najniższym poziomie nie ma czegos takiego jak hadoop, jest tylko hdfs, yarn, hive, hbase itp. Warto wiedziec czym sie rozni hive od hiveserver2 od mestastore i na jakiej zasadzie dziala integracja spark-hive(spark ma wlasny ewaluator do query hiveowych i bazuje na danych z metastora). Nigdy nie pytałem o API sparka ani kolekcji

[programistalvlhard]

@Krever: eh to można powiedzieć że pozamiatane :P Niestety ale przy zmianie stacka z PL/SQL nie jest to takie proste ogarnąć tonę informacji o wszystkich elementach hadoopa a dodatkowo jeszcze ogarnąć na dobrym poziomie np scalę i spark'a. No ale spróbuję to przynajmniej będę wiedzieć jakie pytania zadają na interview ( ͡° ͜ʖ ͡°)

[piterRRR]

@programistalvlhard: możesz powiedzieć jakie pytania były na rozmowie? ( ͡° ͜ʖ ͡°)

[r.....h]

@programistalvlhard: i jak?