Mirki potrzebuje postawić bazę danych pod aplikacje.
Dane będą ustrukturyzowane, około 10-15 kolumn przy czym tylko w jednej będzie tekst użytkownika (wiec może to być cokolwiek). Miesięcznie 50-100 mln rekordów. Nie znam się zupełnie, ale musiałbym wiedzieć mniej więcej co będzie potrzebne. Pytania, co lepiej sql, no sql? Jeżeli no sql to co, żeby była w miare user friendly dla osób, które będą te dane przetwarzać. Musi być w miare szybka do
  • 25
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@morsik: jak na takie fajne odpowiedzi pisać takie bzdury o PostgreSQL to straszny dyshonor.

Nawet goły PostgreSQL z dobrą konfigurajcą na mocnym sprzęcie przyjmie na klatę taką ilość danych.

A jak komuś się nie chce po prostu skonfigurować odpowiednio postgresql i zakupić odpowiednio mocny serwer to problem w zależności od rodzaju danych został rozwiązany już wielokrotnie, Citus, Timescale, Greenplum, Amazon RDS for PostgreSQL, Cloud SQL for PostgreSQL - take your
  • Odpowiedz
Mam taki use case:
- wpada sobie plik (CSV)
- na pliku wykonuje X reguł (powiedzmy takie formuły excelowe)
- wynik trafia do bazy/pliku (no to akurat chyba najmniej problemowe)

I problemy:
  • 11
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@Klopsztanga: No ja obu nie używałem. Ale sprawdze sobie.

@bacteria O rany. Za późno na tak długi tekst. Poczytam sobie tym wzorcu.

@ostrykuc666 Jeny, jak komuś przyjdzie ogarniać kilkuset megowy plik w excell + 100-200 reguł. Toż to rotacja będzie na poziomie 99% :) Dzięki za wskazówki - poptrze co odpowidenik może i co moge w aws.
  • Odpowiedz
Cześć!!

Szukam osób, które chciały by się dowiedzieć czegoś więcej na temat ☁️AWS.

Będę chciał regularnie zamieszczać wpisy na swoim blogu lepczynski.it dające jakąś wartość, zawierające różne porady i tutoriale dotyczące ☁️chmury.

Artykuły,
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Hej Mirki!
Da się jakoś wylistować (w przeglądarce lub cli) wszystkie policy z uprawnieniem X?

Przykładowo: codecommit:PutRepositoryTriggers (albo jakiekolwiek inne) - które polityki zawierają to uprawnienie

#aws
  • 2
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

#netprasowka 11/21

Witam Ciebie w nowym tygodniu. I jak co tydzień zapraszam do przeczytania Netprasówki. 

1. Szkolenie z podstaw AWS. 5 sesji szkoleniowych z inżynierami AWS po polsku. Rejestracja i program w linku:

https://pages.awscloud.com/EMEA-field-OE-CEE-Getting-Started-on-AWS-Week-2021-reg-event.html
Showroute_pl - #netprasowka 11/21

Witam Ciebie w nowym tygodniu. I jak co tydzień ...

źródło: comment_1615794824EKhxv1R8uoQiQ79auEYNuZ.jpg

Pobierz
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Nie znam ekosystemu AWS.
Potrzebuję VPS z Ubuntu na API produkcyjne (Apka w PHP, a Python przetwarza grafiki rastrowe). API odbiera w żądaniach obrazki i zwraca obrazki (a dokładnie URL-e do pobrania). Teraz mam (właściwie miałem) na OVH taką maszynę i na razie wystarcza, całą administrację ogarniam sobie po SSH z konsoli.

Co możecie podobnego zaproponować na Amazonie, aby też nie było dużo drożej?

#programowanie #aws
czlowiekzlisciemnaglowie - Nie znam ekosystemu AWS.
Potrzebuję VPS z Ubuntu na API p...

źródło: comment_1615491043kfoRYAlU48JEGC7K33epzE.jpg

Pobierz
  • 2
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Na #raspberrypi zbieram dane z kilku czujników raportujących po kilka wartości co minutę. Większość danych jest przesyłana przez #mqtt. Danę będę zapisywał lokalnie (do bazy #postgresql / TimescaleDB) oraz przesyłał dalej po MQTT do #aws #iot Core skąd wylądują również w TimescaleDB.
Jak zorganizować, aby np. w przypadku braku dostępu do internetu zaległe dane zostały przesłane gdy będzie to możliwe?

W
  • 3
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@pangolin czaje, ale wydaje mi się że są jakieś message brokery bardzo lekkie które mają te mechanizmy które opisałeś, jeżeli chodzi o ten case który opisałeś to spotkalem się z nim parę razy w biznesowych i było to rozwiązane jak napisałem wcześniej, pewnie jest masa innych brokerów narzędzi, ale no gdzieś te dane muszą się zatrzymać, czyli tzw retencja danych która się uwalnia jak pojawi się subskrybent, ale tedy droga jak
  • Odpowiedz
#mstarzecnews #webdev #programowanie #nodejs #web #javascript #it #bash #aws #apple #windows #elektronika

*JS/Web**:
Graficzny interfejs do zarządzania projektem js (GUI js) - https://guijs.dev/
Race condition w node.js - https://www.nodejsdesignpatterns.com/blog/node-js-race-conditions/
Minifiers benchmark - tldr; UglifyJS i Terser kompresja, esbuild prędkość - https://github.com/privatenumber/minification-benchmarks
  • 1
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

replikacja master-master w #aws nie działa jako cross-region.

chciałbym jednak zrobić replikację między różnymi kontami AWS, ale w tym samym regionie.

Czy ten sam region ale na różnych kontach jest traktowany jako ten sam region czy jako cross-region? Nie mogę znaleźć odpowiedzi...

#programowanie #cloud
  • 7
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@piotrow: napisałęm do supportu i już mogę pingować ale mimo otwartego wszytkiego na świat nie moge połaczyć się z ssh, byłem na forum to też były wątki że ludzie nie mogą sie podłaczyć
  • Odpowiedz
Zarządzanie użytkownikami i kontami na AWS - lepszy sposób

Kiedy zaczynałem z AWS, na początku nie mogłem zrozumieć, jak to jest z tymi użytkownikami i kontami. Taka prosta rzecz, jak zarządzanie kontami i użytkownikami w AWS, była naprawdę skomplikowana.

Amazon Web Services nie wskazuje nam wprost jednej, prawidłowej drogi. Można robić to na kilka sposobów, a na dodatek w różnych miejscach.

Napisałem
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach