Post #4119084
2026-07-26 19:14 UTC
@kaaswe@swecyb.com Scrapingen är ju en sak - men sen finns den alldeles "riktiga" bot-trafiken där jag bett min kodnings-LLM att researcha (triggar tinysearch MCP som är kopplad till min SearXNG-instans) ett ämne. Det är sidor som jag tidigare hade surfat till och läst "manuellt" men som nu botläses istället - fast i samma syfte.
Replies (2)
-
@kaaswe@swecyb.com 2026-07-26 19:22
@troed@swecyb.com Så är det och det är ganska svårt (har jag märkt) att skilja på den goda och dåliga trafiken och droppa rätt och tillräcklig mycket, men inte för mycket, för att din site ska överleva. För vissa är det inget problem om back-end kan hantera det, eller om bandbredd inte påverkar dig, eller CPU cycles, men tyvärr ser det inte ut så för majoriteten av mindre siter. Då blir skrapningen ett major problem. Det kostar massor i nertid, ökade driftskostnader och förlorade intäkter. För en del verksamheter har detta blivit en existentiell fråga
-
@kaaswe@swecyb.com 2026-07-26 19:26
@troed@swecyb.com Det är inte dina MCP’s som är problemet.