[vuvkid]

Hej Miraski,

Mam ETL, który procesuje dane ze źródła do celu. Problem jest taki, że czasem zrywa połączenie podczas pchania tych danych. Czy znacie jakieś dobre praktyki, które pozwoliłyby odnowić to połączenie i ponawiać aż do skończenia procesowania? ID rośnie monotonicznie, więc można jestem w stanie wyciągnąć sobie ostatnie ID, które załadowałem i od niego rozpocząć, więc tu jakby sprawa jasna, ale co zrobić by odnowić to połączenie i nie podnieść ErrorCount?

#sql #ssis #etl #bazydanych

[szymciak]

@vuvkid: ale masz zerwanie czy time out? jak time out przedluz czas

[vuvkid]

@szymciak: mam timeout ale wyskakuje mi on losowo - raz załaduje 19kk rekordów i wtedy zerwie, raz nie załaduje nawet jednego i zerwie więc to raczej nie to.

[Supaplex]

@vuvkid: A gdy wywali timeout nie możesz ponownie uruchomić procesu o ile się on nie skończył ? Jednocześnie sprawdzając gdzie się skończył proces i starać się go od tego miejsca kontynuować?
I tak w kółko, aż sie uda.
Tylko się w jaką pętlę nieskończoną nie właduj..