Post #3392008
2026-05-28 10:48 UTC
No niin, ollaan palattu normaaliin päiväjärjestykseen: Facebook hakee edelleen robots.txt:tä tuhansia kertoja päivässä, ja siihen päälle on nyt tullut Facebookin LLM-botti, joka tällä hetkellä hakee sivun joka viides sekunti. Saa nähdä, koska vauhti kiihtyy.
Tämä ei välttämättä tule yllätyksenä, mutta robots.txt kieltää Facebookin boteilta sivuille pääsyn. LLM-botti ei robots.txt:tä luonnollisestikaan lue.
Replies (1)
-
@6D696B6B6F@infosec.exchange 2026-05-28 10:57
@ssundell@mastodontti.fi Kaiken maailman sisällön kyttääjät ja raaputtajat ovat kyllä tämän hetken yksi suurimmista vitsauksista palvelujen näkökulmasta. Aivan käsittämättömiä määriä kaistaa ja tehoja syöstään avaruuden tyhjyyteen täysin hyödyttä. Olisipa joku kevyt ja helposti pystytettävä Moolokin kita jonne jokaisen raaputtimen voisi ohjata ikuiseen kadotukseen ilman että luonto tuhoutuu.