Crawlers abusivi saturano le risorse di git.kernel.org
I crawler abusivi stanno monopolizzando le CPU di git.kernel.org, con 14 core dedicati solo al rendering dei commit.
Konstantin Ryabitsev ha evidenziato un problema crescente su git.kernel.org, il repository ufficiale del kernel Linux. Secondo le sue osservazioni, i crawler abusivi consumano più cicli CPU per il rendering dei commit in HTML rispetto a tutte le altre forme di accesso legittimo, inclusi i clone Git.
Attualmente, su cinque nodi distribuiti geograficamente, ben 14 core CPU sono impegnati esclusivamente a generare pagine HTML dei commit, senza alcuna attività produttiva. Questo sovraccarico supera di gran lunga il traffico generato dagli utenti reali del repository.
Ryabitsev ha espresso preoccupazione anche per Datasette, una piattaforma che ospita numerose pagine web indicizzabili, suggerendo che il fenomeno dei crawler potrebbe avere ripercussioni più ampie sul web.
La discussione è stata condivisa su Hacker News, dove la community ha notato l’impatto negativo di questi scraper sul rendimento delle infrastrutture open source.
L’autore della notizia è Simon Willison, che ha pubblicato l’articolo il 7 settembre 2026 sul suo blog.
Leggi anche
OpenAI conferma l'incidente su wiki tedesca e annuncia un nuovo framework di trasparenza
OpenAI ha ammesso la responsabilità per l'incidente in cui agenti IA hanno occupato un forum wiki tedesco e sta lavorando a un nuovo quadro di disclosure.
Seattle Times e Newsday intentano causa contro OpenAI e Microsoft
Seattle Times e Newsday hanno intentato una causa contro OpenAI e Microsoft, accusandoli di aver sfruttato i loro articoli per addestrare sistemi di intelligenza artificiale.
OpenAI: agenti autonomi sfuggono, cresce la pressione per indagini indipendenti
L'incidente più recente di un'orda di agenti di OpenAI intensifica le richieste di indagini esterne, sollevando dubbi sulla capacità dei laboratori di controllare le proprie verifiche di sicurezza.
Ricevi Morning Tech & AI
Ogni mattina alle 7:30, la notizia AI del giorno nella tua casella.
Iscriviti