Robię model profitowości kontraktów handlowych w #pracbaza i chciałbym podpiąć pod niego prosty model machine learning, który na podstawie wstępnej propozycji handlowca proponowałby zoptymalizowane parametry takiego kontraktu, tak aby dążyć do maksymalnej profitowości.

Coś w stylu, że tutaj damy trochę większy rabat, tutaj dla nas ciut większa prowizja, klient prawie nie zauważy, a dla nas to będzie znacząca różnica w profitowości takiego kontraktu.

1. Ile czasu realnie coś takiego mogłoby zająć? Cośtam
MarteenVaanThomm - Robię model profitowości kontraktów handlowych w #pracbaza i chcia...

źródło: image

Pobierz
@MarteenVaanThomm: jak masz dużo danych i ich model nie jest raczej skomplikowany to sieci neuronowe mogą łatwo być overkillem - model użyj jaki chcesz, ale nie przesadzaj z jego wielkością. Nie wiem też co dokładnie chcesz osiągnąć i dlaczego nie można tego po prostu policzyć. Jeśli masz zbiór zatwierdzonych "optymalnych" kontraktów i chcesz włożyć nowy nieoptymalny kontrakt aby go poprawić to możesz tu zastosować maszynę Boltzmanna. Ewentualnie zastosować redukcję wymiarowości, wyznaczyć
@Bejro: dzięki bardzo, sporo ciekawych rzeczy piszesz.

Jeśli chodzi o równanie do średniej to tutaj nie zda to egzaminu. Dlatego, że jeśli mamy parametr X (jakaś opłata_2 powiedzmy) dla klienta równa 100, a w modelu referencyjnym, tym najbardziej profitowym ten parametr dąży do 20, to równanie 100 do 20, czy nawet 50 nie ma sensu, bo klient na to nie pójdzie. Nie chcemy tutaj przerabiać każdej propozycji kontraktu pod jeden słuszny
Cześć Mirki, nie mam większego pojęcia o kartach graficznych ale potrzebuje jedną kupić więc poproszę o poradę jaki symbol ma karta której potrzebuje:
- najtańsza spełniająca te warunki
- AMD, ma działać na #linux
- wiedźmin dziki gon ma działać
- da się użyć do obliczeń np. #tensorflow
- min 3 wyjścia na monitor, najlepiej 4 wyjścia

pozdrawiam i dziękuje za sugestie, #hardware
@marcus777: nie interesuje się tym tematem jakos od 4 lat, ale juz wtedy vgg16 to był stary szajs, w 2019 powiedziałbym Ci, że jak chcesz mały, wydajny model to bierz mobilenet v1/v2 lub squeezenet albo shufflenet. Przez te lata pewnie powstały jeszcze jakies lepsze modele skoro aplikacja aparat w telefonie korzysta z segmentacji obrazu(rozmywnanie tla), GAN(super res zoom) czy masz też voice-to-text offline (live caption).
Całkowita zmiana modelu na VGG16 i znów cały dzień zostawić komputer i pozwolić mu się uczyć. Zostało ok 100 epok po 26 minut. Plateau i EarlyStopping pewnie zakończy wcześniej jeśli będzie zbieżność. Mam nadzieje, że teraz wypluje już sensowny model i prócz tego na urządzeniu docelowym będzie działać w przyzwoitym czasie.
#programowanie #ai #siecineuronowe #keras #tensorflow #macos #python
marcus777 - Całkowita zmiana modelu na VGG16 i znów cały dzień zostawić komputer i po...

źródło: Zrzut ekranu 2023-06-17 o 14.45.11

Pobierz
  • 1
@Patres: vgg16 to przetrenowany na imagenet model do klasyfikacji obrazów. W moim przypadku model będzie dostawał zdjęcia ludzi wypluwając na dwóch rozgałęzionych wyjściach dwa floaty z cechami
  • 2
@Patres: CNN to niesamowite narzędzie, dające wyniki do nierozwiązywalnych problemów.
Teoria stojąca za sieciami jest banalnie prosta. Od perceptronu rosenblatta i kernel trick naukowcy nic więcej nie wymyślili. To co robi moja sieć to wielokrotne rozmywanie obrazu i sumowanie. I tak 50 milionów razy dla każdego wyniku :)
  • 0
@arysto2011: niekoniecznie #!$%@?, sprawdzilem to kilka razy i zmienilem dane do trenowania i testow. W tym problemie klasy mialy znaczne roznice miedzy soba wiec problem wydawal sie bardzo trywialny.
testowane na nowych danych dalej daje 100% accuracy.
Hejka, potrzebuję lekkiej porady od #programista15k

Pracuję w korpo i mamy dofinansowanie na szkolenia. Z kursów co mogłyby mnie najbardziej interesować to kursy Pythona, Javy, Analizy Danych, Analizy Danych w Pythonie, kurs Linuksa, PowerBI i pisanie stron. Są to normalne jakieś #bootcamp

Szczerze najbardziej zaciekawił mnie #python tylko, że... ja go używam już. Jestem nie jako samoukiem oraz miałem to wymuszone potrzebą nauki na studia magisterskie. Jak można się spodziewać nie mam
@lonceg:
1. Nie lepiej wybrać sobie coś pod kątem tego, co byś chciał robić w przyszłości?
2. Trochę mało info podajesz. Ciężko ocenić czy jakiś bootcamp będzie dobry dla Twojego stanu wiedzy jeśli tak naprawdę nie mamy zielonego pojęcia co to za bootcamp ani jaki jest poziom Twojej wiedzy.
@lonceg: Powiem tak: bootcampy mają, całkiem słusznie, złą opinię z powodu wymienionego we wpisie wyżej. Z drugiej strony nie ma lepszego sposobu nauki niż obecność jakiegoś mentora, który ma większa wiedzę i odpowiednio Cię pokieruje, odpowie na masę pytań.
Nie wiem jak tam poziom Twoich finansów czy czasu wolnego, ale jeśli poświęcenie kilku stówek i tego czasu nie jest dla Ciebie wielkim problemem to tak naprawdę niewiele ryzykujesz. Czegoś nauczysz sie
#programowanie #tensorflow
Utworzyłem sieć neuronową na 30000 parametrów. Dane uczące to 4500 wektorów o wielkości 400 elementów dających 7 kategorii wyjściowych. Tylko CPU dostępne. 8 giga ram, procesor 3GHz

Jak długo może się taka sieć uczyć? Nawet jak ograniczę do warstwy input i output, czyli jakieś 2000 parametrów, to i tak nic po 30 minutach nie rusza.
Szukam jakiegoś narzędzia, które ze zdjęcia wewnątrzustnego zębów zrobionego telefonem ładnie przytnie mi je tak, żeby na zdjęciu były tylko same zęby. Zdjęcia muszę robić z daleka, więc muszę przycinać je tak, żeby były widoczne na nim tylko zęby (bez nosa, warg itp.. Przykładowe zdjęcie wygląda tak - http://ksiaznica.home.pl/nowastomatologia/img/ryciny/images_ns/20120211_.jpg

Czy narzędzie typu #tensorflow lub inne #ai czy #machinelearning może mi pomóc rozwiązać taki problem? Mam bazę zdjęć pierwotnych i przyciętych więc mogę
#anonimowemirkowyznania
Mirki potrzebuje speca od #rodo w it: czy apka która na podstawie kamery ocenia wiek i go wyświetla, ale nigdzie nie zapisuje obrazu i nic nim wiecej nie robi przetwarza dane osobowe (xd) w mysl rodo? Czy mozna tablet z takim czyś postawić na witrynie? Co zrobić zeby to było ok w myśl tych genialnych przepisów?
#prawo #it #siecineuronowe #ai #tensorflow #opencv #pracbaza

---
Kliknij tutaj, aby odpowiedzieć w tym wątku
AnonimoweMirkoWyznania - #anonimowemirkowyznania 
Mirki potrzebuje speca od #RODO w i...

źródło: comment_16579146866Yu26bSZ90HsIvrktDkMKJ.jpg

Pobierz
TrzeźwyPiwniczak: @SlepyBazant: Byłem już u „speca” rodo ale ci ludzie nie maja pojęcia czym jest komputer i jak działa jakikolwiek program. Według nich wszystko się zapisuje i kazda klatke trzebaby trzymać przez dwa miesiące i wydawać na zapytanie huk wie kogo xd Typ przekonywał mnie ze rodo musi być, najlepiej u niego, minimum cztery cyfry pln na miesiąc xd na baner do piekarni xd
---

Zaakceptował: karmelkowa
Czy ktoś bardziej doświadczony mógłby mi powiedzieć czy takie wyniki Loss są dobre, czy złe? Smoothing w tensorboardzie ustawiony na 1, ale widać jak skacza wartości pod spodem
Batch size = 8,
learning rate 0.08, ale zaczyna od 0.02,
Ilość zdjęć do trenowania to ~500.
Ma wykrywać tablicę rejestracyjne.
Model to ssdmobilenetv2fpnlite320x320, chciałem "lepsze" ale mój komputer na to nie pozwala

Z tego co rozumiem to wykres ma jak najbardziej dążyć do
Bocislaw - Czy ktoś bardziej doświadczony mógłby mi powiedzieć czy takie wyniki Loss ...

źródło: comment_1636830773ZJsf8baNvZLmUhU62bdM4A.jpg

Pobierz
@ProfesorBigos: w projekcie korzystam z Object Detection API od biblioteki Tensorflow, szukałem czy da się takie miary uruchomić w tensorboardzie ale ludzie napotykali ten sam problem, mam jedynie wykresy eval, jestem trochę pod ścianą bo trenowanie 10000 kroków w batch size = 8 zajmuje mi ponad godzine, a robie to juz parenasty raz bo zawsze nie wykrywa mi dobrze, nie wiem co mogę zrobić :/
Bocislaw - @ProfesorBigos: w projekcie korzystam z Object Detection API od biblioteki...

źródło: comment_1636920168QfaXafA28LB6WqG77p1pFf.jpg

Pobierz
Czy ktoś bardziej doświadczony mógłby mi powiedzieć czy takie wyniki Loss są dobre, czy złe? Smoothing w tensorboardzie ustawiony na 1, ale widać jak skacza wartości pod spodem
Batch size = 8,
learning rate 0.08, ale zaczyna od 0.02,
Ilość zdjęć do trenowania to ~500.
Ma wykrywać tablicę rejestracyjne.
Model to ssdmobilenetv2fpnlite320x320, chciałem "lepsze" ale mój komputer na to nie pozwala

Z tego co rozumiem to wykres ma
Bocislaw - Czy ktoś bardziej doświadczony mógłby mi powiedzieć czy takie wyniki Loss ...

źródło: comment_1636821127AYO5uEm3CbRjfwkgLpmMsL.jpg

Pobierz
Zastanawiam sie czy w ramach trenimgu nie wziać się za program do rozpoznawania reczniepisanych słów. Chodzi mi zwlaszcza o słowa w języku rosyjskim, ale tez polskim i niemieckim. Przydałoby mi się coś takiego w moich badaniach genealogicznych, bo mógłbym łatwo sam rozczytywać i tłumaczyc na polski i indeksować księgi parafialne.
Z wstepnego rozeznania mysle zeby sprobowac #tensorflow i #opencv . Ktoś próbował czegos takiego i moze polecic inne rozwiazania? Moze jest cos
TensorFlow.js

Czy kto tu wie jak włączyć do modelu warstwę LSTM??

input: 31
hidden: 93
output: 3

Error: Input 0 is incompatible with layer lstmLSTM1: expected ndim=3, found ndim=2


const model = tf.sequential();

const hidden = tf.layers.dense({
units: this.hiddennodes, // 93
inputShape: [this.inputnodes], // [31]
activation: 'sigmoid'
});

const lstmHidden = tf.layers.lstm({
units: 93,
inputShape: 93,
recurrentInitializer: 'glorotNormal',
});

const hidden2 = tf.layers.dense({
units: this.hidden
nodes, // 93
activation: 'sigmoid'
Jak jest prościej niż z OCR, to bardzo się cieszę.


@look997: No bo nie potrzebujesz czytac tego tekstu, potrzebujesz wiedziec czy cos jest dobrze czy zle ulozone.

o samoczynnym znalezieniu algorytmu poprzez gotowe prawidłowe z których się uczy.


@look997: Nie rozumiem tego zdania. cnn sam sobie znajdzie na co ma patrzec, wystarczy dac mu tylko przykladowy batch z opisem. W twoim wypadku bedziesz mial tylko 2 kategorie i tyle.
#tensorflow #spacy #machinelearning #nlp #python

Po wielu walkach ze spacy i morfeuszem udało mi się wszystko wreszcie zainstalować.
Najpierw ogarnąłem, że spacy musi być 2.2.4, potem przy ładowaniu modelu tensorflowi nie podobało się numpy w wersji 1.2, więc downgrade do 1.9 i teraz przy próbie odpalenia przykładu z example wywala błąd...

poniżej kod ( ͡° ͜ʖ ͡°) i error
https://pastebin.pl/view/c1cf3bca
tracę powoli siły do tego

edit: dobra.. chyba