[rudi_90]

Siema Mirki,

czy znajdę pośród was jakąś osobę która zna się trochę na neo4j?
Mam zrobić porównanie wydajności zapytań miedzy tą bazą grafową a relacyjną (MySQL) i zastanawiam się jak najlepiej to zrobić...

#programowanie #neo4j #bazydanych #nosql

[czolnowski]

@rudi_90: A co konkretnie chcesz porównać?

[rudi_90]

@czolnowski: Czas wykonania zapytania dla bazy danych - adv. works w postaci relacyjnej vs zmigrowana do postaci grafowej

[sorhu]

@rudi_90: No to:
1. Zmigruj SQL-ową bazę do Neo4ja.
2. Wykonaj zapytanie do SQL-a i zmierz czas.
3. Wykonaj analogiczne zapytanie do Neo4ja i zmierz czas.
4. Porównaj czasy.

Z którym punktem masz problem?

[czolnowski]

@sorhu: Do takiego testu potrzeba sporego zbioru badawczego. Nie prościej rozpisać to na złożoności?

[sorhu]

@czolnowski: Ty to chyba z UJ-u. ( ͡° ͜ʖ ͡°)
Praktyka > teoria. ( ͡° ͜ʖ ͡°)

[rudi_90]

@sorhu: ok, tak własnie zamierzam to zrobić, jednak pojawiają się problemy w postaci takiej że wyniki zapytań w neo4j są cachowego za każdym razem, i raczej nie da rady tego cache'a wyczyścić. Druga sprawa to typy zapytań które najlepiej porównać w obu systemach

[sorhu]

@rudi_90: Cache można wyłączyć.
A zapytania zrób takie, które pokażą kiedy graf szybciej poleci, a kiedy wolniej.

[czolnowski]

@rudi_90: wyniki z rdbmsów też są cachowane. ;)
@sorhu: nie kończyłem żadnych studiów. Praktyka, szczególnie w kontekście zbiorów danych jest ciężka do wiarygodnej weryfikacji bez dużej ilości danych. Wyniki często będą zbliżone. Wynika to nie tylko z szybkości obecnych maszyn, ale również z tego, że sporo baz danych ma algorytm do rozwiązywania prostych przypadków. Przykład: porównaj agregowanie przez elasticsearcha z agregowaniem przez postgresa.

[sorhu]

@czolnowski: No to się zrobi duży zbiór. Ale problem. ( ͡° ͜ʖ ͡°)

[czolnowski]

@sorhu: A jaki Twoim zdaniem jest wystarczający, żeby potwierdzić wynik? Jak uzyskasz odpowiednią granularność?

[zajety_login]

@rudi_90: A co chcesz tak właściwie uzyskać? Pokazać dla jakich problemów neo4j będzie wydajniejsze niż RDBMS (i odwrotnie)? No i ważna kwestia: czy masz narzucony jakiś zbiór danych i/lub konkretne zapytania które masz na nim wykonać?

[rudi_90]

@zajety_login: Nie, tutaj mam dowolność, z jakiego zbioru korzystać i jakie zapytania wykonać. Chcę sprawdzić dla jakich rozwiązań lepsza będzie baza danych neo4j a w jakich mysql np

[zajety_login]

@rudi_90: Baza grafowa będzie dawała radę wszędzie tam gdzie dane są ze sobą mocno powiązane (i gdzie oczywiście zapytania będą wykorzystywały te powiązania). Przykładem może być graf znajomości między ludźmi, w którym szukasz wszystkich znajomych 4/5/6-stopnia jakiegoś Janka Kowalskiego. W neo4j sprowadzi się to do przechodzenia po grafie, a w RDBMS do wielopoziomowych JOINów na tabeli zawierającej krawędzie (każda krawędź będzie oznaczała znajomość dwóch osób).

[rudi_90]

@zajety_login: tak, w przypadku zapytań rekursywnych neo4j powinna dawać radę lepiej niż rdbms, ponoć również w przypadku zapytań o rekomendacje (wyznaczanie jakiś trendów) lepiej radzi sobie neo4j. Zastanawiam się też czy można tutaj brać pod uwagę tuning zapytań (dodawaniu indeksów) w neo4j itp

[zajety_login]

@rudi_90: To już zależy od tego czy masz czas na to żeby różne warianty przetestować :P

[bziuuumor]

@rudi_90: darmowa książka, która opisuje dokładnie ten problem kilk

[rudi_90]

@bziuuumor: przegladalem ją, w mniemaniu jej autorów (co jest z wiadomych celów oczywiste) neo4j nadaje się do wszystkiego ;)