Hugging Face acelera upload e download de modelos de IA com nova tecnologia de blocos
Plataforma muda a forma como arquivos de inteligência artificial são transferidos, reduzindo tempo de envio e recebimento em até 5 vezes.
A Hugging Face (uma plataforma onde desenvolvedores compartilham e baixam modelos de IA já treinados) anunciou uma mudança importante na forma como os arquivos são enviados e recebidos por seus usuários. A empresa substituiu o sistema antigo, que dividia os arquivos em "chunks" (pedaços pequenos e fixos), por um novo método baseado em "blocos" maiores e mais eficientes. Na prática, isso significa que quem trabalha com modelos de linguagem grandes (LLMs, os sistemas de IA que entendem e geram texto) vai gastar menos tempo esperando transferências.
O problema do sistema anterior era simples: arquivos gigantes — alguns modelos pesam dezenas de gigabytes — eram fatiados em milhares de pedaços minúsculos, e cada pedaço exigia uma negociação separada entre o computador do usuário e os servidores da Hugging Face. Isso criava um gargalo, especialmente em conexões rápidas, onde o tempo perdido em comunicação entre cliente e servidor superava o tempo real de transferência dos dados.
Com a nova abordagem, segundo informou a Hugging Face em seu blog oficial, os arquivos são divididos em blocos maiores (de até 500 MB cada), e o sistema permite que vários blocos sejam transferidos ao mesmo tempo. Em testes internos, a empresa registrou melhorias de até 5 vezes na velocidade de upload e download de modelos grandes, especialmente para quem usa conexões de fibra ótica ou redes corporativas de alta velocidade.
A mudança é transparente: quem usa as bibliotecas oficiais da Hugging Face, como a huggingface_hub (o pacote de código que facilita interagir com a plataforma), já se beneficia automaticamente da nova tecnologia sem precisar alterar nada no próprio código. Para times que treinam e compartilham modelos com frequência — seja em startups, laboratórios de pesquisa ou equipes de ciência de dados —, a economia de tempo pode ser significativa, reduzindo horas de espera a poucos minutos em alguns casos.
A atualização reforça a posição da Hugging Face como infraestrutura central para quem trabalha com IA de código aberto. Com mais de 1 milhão de modelos hospedados (incluindo versões abertas de sistemas como Llama, Mistral e Falcon), a plataforma se tornou o equivalente a um GitHub (repositório online de código) para modelos de inteligência artificial. Qualquer ganho de eficiência ali se multiplica por milhares de usuários e projetos ao redor do mundo.
