Hugging Face adiciona suporte a Xet para compartilhar modelos de IA gigantes
A plataforma agora permite armazenar e versionar modelos de inteligência artificial usando tecnologia que reduz drasticamente o espaço ocupado por arquivos duplicados
O Hugging Face integrou o Xet, um sistema de controle de versão (ferramenta para organizar diferentes versões de um projeto) feito para arquivos grandes. Ele armazena apenas as diferenças entre versões de um modelo de IA, economizando até 90% de espaço e acelerando downloads de atualizações.
O Hugging Face (uma plataforma onde desenvolvedores compartilham e baixam modelos de IA já treinados) anunciou a integração com o Xet, um sistema de controle de versão (uma forma de organizar diferentes versões de um projeto ao longo do tempo) criado especialmente para lidar com arquivos enormes. A novidade promete facilitar a vida de quem trabalha com modelos de linguagem de grande porte, que costumam ocupar dezenas ou centenas de gigabytes.
O Xet funciona de forma parecida com o Git (a ferramenta mais usada no mundo para versionar código), mas foi desenhado desde o início para arquivos binários grandes — exatamente o tipo de arquivo que um modelo de IA gera quando é treinado. Quando você faz upload de várias versões de um modelo, o Xet identifica automaticamente as partes que não mudaram entre uma versão e outra e armazena apenas as diferenças, economizando espaço e largura de banda.
Na prática, isso significa que uma equipe pode publicar no Hugging Face várias versões experimentais de um mesmo modelo sem explodir o espaço de armazenamento. Segundo a empresa, em alguns casos a economia pode chegar a 90% do espaço total. Para quem baixa, o benefício também é direto: o sistema só transfere os blocos de dados que mudaram, acelerando o download de atualizações.
A integração já está disponível para todos os usuários do Hugging Face. Para ativar o Xet em um repositório (o espaço onde fica armazenado um projeto na plataforma), basta marcar uma opção nas configurações — não é preciso instalar nada novo nem mudar de ferramenta. A medida reforça a aposta do Hugging Face em se tornar a infraestrutura padrão para quem desenvolve e distribui modelos abertos de IA, competindo diretamente com serviços fechados das grandes empresas de tecnologia.
