Não é segredo que a corrida para criar os modelos de inteligência artificial mais poderosos começou. No fim de semana, o bilionário Elon Musk, dono da plataforma de mídia social X, assumiu a liderança.
Musk postou em 2 de setembro que sua equipe na xAI, sua própria empresa de desenvolvimento e pesquisa de IA, colocou seu modelo de cluster de treinamento Colossus 100k H100 online.
Fonte: Elon Musk
Musk disse que sua equipe levou 122 dias para concluir o processo de colocar o Colossus online e, nos próximos meses, ele dobrará de tamanho, chegando a 200 mil (50 mil H200s).
O mega modelo de Musk
O Colossus agora é considerado o sistema de treinamento de IA mais poderoso disponível. Esse número é baseado no número de unidades de processamento gráfico (GPUs) que alimentam o modelo.
Um usuário do X destacou a escala real desse desenvolvimento, superando todos os principais modelos lançados até o momento. Em comparação, o modelo mais poderoso da OpenAI usa 80.000 GPUs.
Fonte: Anthony Everywhere
O modelo foi desenvolvido em colaboração com a Nvidia, a fabricante líder mundial de chips semicondutores. O H200 da Nvidia é um dos semicondutores mais procurados do mercado, embora tenha sido recentemente superado pelo mais recente chip Blackwell da empresa, revelado em março de 2024.
Em comparação, o H200 é equipado com 141 GB de memória HBM3E e 4,8 TB/seg de largura de banda. A capacidade de ponta do Blackwell é 36,2% maior que a do H200 e 66,7% maior em largura de banda total.
A Nvidia respondeu à revelação do Colossus postando parabéns a Musk e à equipe xAI. Ela também destacou que ele será o mais poderoso e terá “ganhos excepcionais” em eficiência energética.
Fonte: Nvidia
Em todas as plataformas sociais, houve uma resposta esmagadora de usuários do setor, chamando isso de uma conquista "enorme" no campo da IA.
Cathie Wood, CEO do fundo de capital de risco ARK Invest, também parabenizou a equipe pela conquista, chamando-a de “impressionante” e dizendo “grandes anúncios pela frente”.
Fonte: Cathie Wood
O Cointelegraph entrou em contato com a Nvidia e a xAI para obter comentários sobre o lançamento do modelo.
Inteligência em formação
Em abril de 2023, foi amplamente divulgado que Musk estava comprando grandes quantidades de GPUs, com algumas fontes relatando até quase 10.000 unidades de processamento gráfico com as quais ele pretendia promover seus projetos xAI.
Musk tem falado muito sobre seus planos de desenvolvimento no espaço de IA. Ele tem planos para um supercomputador que pode estar operacional no outono de 2025 e formar uma parceria com a Oracle.
Ao liderar a revolução da IA, Musk também apoiou regulamentações que promovem uma IA segura.
Em 27 de agosto, Musk postou no X que acredita que o estado da Califórnia deveria aprovar seu Projeto de Lei do Senado 1047 — uma opinião controversa na indústria de tecnologia, pois muitos se preocupam que isso possa sufocar a inovação da IA nos EUA.
Fonte: Elon Musk
Ele disse que é um defensor da regulamentação da IA há mais de duas décadas e a considera semelhante às regulamentações sobre “qualquer produto/tecnologia que seja um risco potencial para o público”.
Em 9 de agosto, a X concordou em suspender o processamento de dados pessoais de seus usuários na região da UE após procedimentos legais em um tribunal irlandês envolvendo a Comissão de Proteção de Dados local.
Revista: IA já pode usar mais energia do que Bitcoin — e ameaça a mineração de Bitcoin