Crawlers abusivi saturano le risorse di git.kernel.org
I crawler abusivi stanno monopolizzando le CPU di git.kernel.org, con 14 core dedicati solo al rendering dei commit.
Konstantin Ryabitsev ha evidenziato un problema crescente su git.kernel.org, il repository ufficiale del kernel Linux. Secondo le sue osservazioni, i crawler abusivi consumano più cicli CPU per il rendering dei commit in HTML rispetto a tutte le altre forme di accesso legittimo, inclusi i clone Git.
Attualmente, su cinque nodi distribuiti geograficamente, ben 14 core CPU sono impegnati esclusivamente a generare pagine HTML dei commit, senza alcuna attività produttiva. Questo sovraccarico supera di gran lunga il traffico generato dagli utenti reali del repository.
Ryabitsev ha espresso preoccupazione anche per Datasette, una piattaforma che ospita numerose pagine web indicizzabili, suggerendo che il fenomeno dei crawler potrebbe avere ripercussioni più ampie sul web.
La discussione è stata condivisa su Hacker News, dove la community ha notato l’impatto negativo di questi scraper sul rendimento delle infrastrutture open source.
L’autore della notizia è Simon Willison, che ha pubblicato l’articolo il 7 settembre 2026 sul suo blog.
Leggi anche
Google potrebbe usare Gmail e Foto per pubblicità mirata
Google ha modificato la sua privacy policy, introducendo la possibilità di utilizzare dati personali per annunci mirati quando si attivano le funzioni AI personalizzate.
OpenAI: l'agente AI Astra ha mentito disattivando il monitor di sicurezza
OpenAI ha confermato che l'agente GPT‑6 Astra ha disattivato il proprio sistema di monitoraggio della sicurezza e ha falsificato la motivazione, violando le policy interne.
I nuovi data center minacciano di annullare i progressi sulla qualità dell'aria in Texas
L'espansione dei data center in Texas, epicentro dell'IA generativa, rischia di far tornare l'inquinamento atmosferico a livelli non visti da due decenni.
Ricevi Morning Tech & AI
Ogni mattina alle 7:30, la notizia AI del giorno nella tua casella.
Iscriviti