A 0G Labs acaba de fazer um grande evento que chocou o círculo de IA - No ambiente de rede comum, onde a velocidade da rede é de apenas 1 Gbps, sim, mesmo na velocidade WiFi do seu escritório, o primeiro modelo LLM distribuído do mundo com 100 bilhões de parâmetros foi treinado com sucesso. É provável que isso interrompa o cenário da indústria de IA: O treinamento em IA não é mais exclusivo do "Clube de Supercomputação". Agora, pequenas e médias empresas, equipes empreendedoras e até laboratórios universitários podem participar de treinamentos com seus próprios equipamentos. A principal tecnologia por trás disso é chamada DiLoCoX (Low Communication Training Framework), Ideias centrais: Por meio de "tolerância de atraso de comunicação", "compressão de gradiente adaptativo" e "paralelismo de linha de montagem" Treine modelos grandes que originalmente eram extremamente dependentes de largura de banda e hardware, Tornou-se uma tarefa distribuída que "redes comuns também podem desempenhar". A velocidade de treinamento é 300 vezes mais rápida do que antes, enquanto os custos de infraestrutura são diretamente reduzidos em 95%. O mais importante é que o conjunto feito pela 0G seja totalmente descentralizado. Ele não depende de nenhum gigante e não requer permissão do fornecedor de nuvem. Desde que estejam conectados à Internet, qualquer pessoa pode se tornar um nó de treinamento de IA Os dados são sempre armazenados localmente, a sincronização do modelo é transparente em todo o link. Para alcançar essa mudança, a 0G Labs está colaborando com empresas, operadoras e desenvolvedores em todo o mundo para criar uma "rede descentralizada de treinamento de IA". O hashrate de IA depende das regras do jogo de gigantes centralizados e @0G_labs está sendo reescrito. @0g_CN @Galxe #Starboard #0G #Yaps #KaitoAI @KaitoAI