Não existe HDD suficiente para armazenar a internet; entenda

Não existe HDD suficiente para armazenar a internet; entenda – Canaltech

Você já parou para imaginar o tanto de arquivos que existem na internet e onde eles ficam? Tudo precisa ser armazenado em drives, como qualquer arquivo em qualquer PC. O problema é que a atual crise de hardware tem causado uma escassez de HDDs/SSDs e memória tão severa, que está difícil conseguir mais espaço para armazenar a própria internet.

Instituições essenciais para a nossa memória digital, como o Internet Archive (responsável pela lendária Wayback Machine) e a Wikimedia Foundation, estão ficando sem chance na disputa por armazenamento, já que os data centers estão abocanhando a maior fatia produzida pela indústria no momento.

Demanda praticamente infinita vs. limite em armazenamento

O Internet Archive tem cerca de 210 petabytes de arquivos, e existem 100 TB adicionados diariamente. Para o fundador Brewster Kahle, manter o projeto está cada vez mais difícil, já que eles estão ficando sem tempo para continuar armazenando os arquivos da internet, que cresce em uma velocidade impressionante.

–
Entre no Canal do WhatsApp do Canaltech e fique por dentro das últimas notícias sobre tecnologia, lançamentos, dicas e tutoriais incríveis.
–

HDDs de 30 TB são essenciais para esse trabalho, mas eles estão com o estoque baixo, e o pouco que sobra tem preços nas alturas. Existem mantenedores, pessoas que fazem doações para manter esse trabalho, mas ainda não é suficiente. A organização está até tentando garantir estoque direto com as fabricantes, mas tudo está indo para as Big Techs.

Maior parte dos HDDs do mundo hoje vão para data centers de IA (Imagem: Envato/Reprodução)

A dona do Wikipedia, a Wikimedia Foundation, também passa pelo mesmo problema, embora em uma proporção muito menor. Manter mais de 65 milhões de artigos já exige mexer no orçamento. Ao 404 Media, um representante disse que a dificuldade nas compras de memórias e HDDs tem causado um grande impacto.

Mas o problema vai além do custo. Há um efeito colateral irônico na tentativa da internet de se proteger da “canibalização” por IA: as medidas anti-scraping. Para evitar que bots de treinamento coletem dados sem autorização, muitos sites fecharam suas portas de forma. Acontece que essas ferramentas de bloqueio não costumam diferenciar o bot de uma empresa de IA de um robô de arquivamento histórico. Como resultado, o Internet Archive está sendo bloqueado em locais onde antes era bem-vindo, impedindo que páginas atuais sejam salvas para a posteridade.

Existe uma previsão na legal de que HDDs ficarão realmente escassos em 2026.

Leia a matéria no Canaltech.

Source link