Post #3886683
2026-07-17 13:50 UTC
Replies (1)
-
@viespirkiai@river.group.lt 2026-07-17 14:11
@mindaugas@mastodon.0011.lt Rate tai tikrai didelio nereikia, ir užkalti nenorim. Kadangi sistema ~320 req/s sugeba be jokių problemų (testuojant vieną naktį, viskas tiesiai iš indeksuotų lentelių jų gale, parsint gaunamo HTML DOM ant keletos core nespėjom greičiau), tai net nežinau ką reikėtų daryti, kad kažką ten užlenkti. Sistema neduoda redagavimo datos, tad kad atsinaujinti visus duomenis reikia: 48k viešųjų pirkimų * 3 (pagrindinis, dokumentų bei skelbimų puslapiai) ir po vieną request kiekvienam dokumentui (gali turėti kelias versijas, failų parsiuntimas kitur vyksta). Kažkur iš viso išeina iki 400k request kad atnaujinti viską. Klausimas tada paprastas – kas kiek reikia atnaujinti kokių pirkimų duomenis? Šiuo metu kas naktį puikiai suvaikščiodavo visi duomenys, dabar reikės prioretizavimą skirti naujesniems pirkimams.