A cooperação apresenta um novo método para validar e acessar com segurança 17 anos de dados de crawls da internet.
O objetivo deste lançamento é criar o primeiro arquivo de dados da internet criptograficamente seguro e imutável.
Isso é realizado usando uma rede blockchain imutável que é baseada na Constellation e é criptograficamente segura.
Um ecossistema Web3 que foi validado pelo Departamento de Defesa dos Estados Unidos, a Constellation Network, anunciou hoje que lançou uma blockchain personalizada que foi desenvolvida em parceria com a Common Crawl Foundation. O objetivo deste lançamento é criar o primeiro arquivo de dados da internet criptograficamente seguro e imutável para fins de treinamento e desenvolvimento de inteligência artificial.
A cooperação apresenta um novo método para validar e acessar com segurança 17 anos de dados de crawls da internet, que abrangem mais de 9 petabytes e são usados por 80 por cento dos Modelos de Linguagem Grande (LLMs) para fins de treinamento de inteligência artificial. Isso é realizado usando uma rede blockchain imutável que é baseada na Constellation e é criptograficamente segura.
Esta rede específica de aplicações revolucionária, também conhecida como Metagraph, trabalha para resolver desafios importantes no desenvolvimento de inteligência artificial, enquanto também explora novos casos de uso enormes para a tecnologia blockchain em setores em desenvolvimento. Esses casos de uso incluem abastecimento ético, proveniência de dados e privacidade. Além disso, para garantir a segurança dos crawls da internet arquivados, a rede fará uso do ativo utilitário DAG fornecido pela Constellation.
Ao mudar a ênfase das despesas do consumidor ou taxas de gás, que são comuns em muitas outras redes de camada um, para uma despesa operacional, isso marca um desenvolvimento substancial na utilização de criptomoedas como um mecanismo para as empresas notariarem dados.
Inovações Tecnológicas Chave
Arquivamento de Dados Abrangente: Um registro da história da internet que não pode ser alterado de forma alguma, oferecendo transparência e rastreabilidade sem igual para conjuntos de dados de inteligência artificial e aprendizado de máquina.
Criptografia de ponta a ponta: É uma segurança criptográfica que garante a integridade dos dados ao longo de todo o ciclo de vida do desenvolvimento de inteligência artificial.
Estrutura de IA Ética: Uma estrutura ética de inteligência artificial é uma abordagem sólida que aborda problemas em torno da coleta, armazenamento e uso de dados em grandes modelos de linguagem.
Alex Brandes, CTO da Constellation Network disse:
“Essa integração é um passo crítico na garantia do futuro do desenvolvimento de IA. Ao garantir a integridade criptográfica e a imutabilidade dos dados de treinamento, estamos abordando um dos desafios mais prementes no campo hoje: a confiabilidade e a proveniência dos conjuntos de dados. Acreditamos que nossa plataforma crescerá para se tornar uma pedra angular no campo do desenvolvimento responsável de IA, estabelecendo novos padrões para a integridade e confiança dos dados.”
A Constellation é uma rede blockchain líder que está impulsionando a inovação por meio da segurança de dados on-chain. Ela está colaborando com grandes partes interessadas globais, como o Departamento de Defesa dos Estados Unidos, para oferecer inovações que são revolucionárias e de próxima geração.
Aplicações na Indústria
O arquivo de dados que é habilitado pela tecnologia blockchain já está atraindo a atenção de grupos de pesquisa em inteligência artificial sofisticados. Para adicionar imutabilidade, auditabilidade e prova de autoria aos seus modelos de treinamento e desenvolver tecnologias avançadas de marca d’água, a TraceAI, um projeto desenvolvido através da National Science Foundation (NSF) e do programa SBIR, está atualmente nas etapas de teste para desenvolver sua própria rede específica de aplicações, que é construída sobre a Constellation. Além disso, a TraceAI fará uso da solução construída pela Constellation que a Common Crawl desenvolveu para expandir ainda mais seu trabalho em inteligência artificial criptografada em blockchain para incluir o monitoramento da origem dos dados.
Kevin Jackson, Vice-Presidente de Comunicações e Comercialização do Domínio Espacial da Forward EdgeAI, enfatiza a importância dessa inovação:
“Isso representa a evolução natural do desenvolvimento de modelos de IA e aprendizado de máquina—transformando a gestão de dados de um desafio técnico em uma ferramenta de negócios confiável que impulsiona a padronização e verificação globais.”
Olhando para o Futuro
Ao longo dos próximos meses, a Constellation Network e a Common Crawl Foundation colaborarão para ampliar o escopo dos conjuntos de soluções para desenvolvedores de inteligência artificial e melhor integrar a provisão de acesso validado criptograficamente ao crawl como um componente do processo usual de lançamento.
Rich Skrenta, Diretor Executivo da Common Crawl afirmou:
“Para os usuários do Crawl que estão preocupados com a proveniência dos dados, especialmente aqueles que o utilizam para modelos de IA, a Constellation e sua blockchain hipergrafo oferecem uma solução elegante. Estamos ansiosos para adicionar a capacidade de validar com segurança o crawl como parte de nossa distribuição padrão, fazendo parceria com a Constellation.”
A Common Crawl Foundation é uma organização sem fins lucrativos 501(c)(3) e está comprometida em tornar uma cópia da internet disponível para o público geral sem custo. Eles têm um arquivo da web que contém petabytes de dados que coletaram ao longo de anos de crawls na web. Este arquivo é um recurso essencial para acadêmicos, corporações e desenvolvedores em todo o mundo.
É possível encontrar evidências dessa integração no visualizador de transações que a Constellation fornece, que é referido como o “explorador DAG”, e os desenvolvedores podem começar a aproveitar crawls históricos verificados para aplicações de inteligência artificial. Em relação às soluções adicionais que serão criadas pela Constellation, Forward Edge-AI e Common Crawl, pedimos que você acompanhe.
Em relação ao Forward Edge-AI, uma revolução na inteligência artificial (IA) responsável e inclusiva para o bem-estar da humanidade está sendo liderada pelo Forward Edge-AI, que está na vanguarda dessa próxima revolução. Desde a fundação da empresa em 2019, o objetivo tem sido se tornar o principal ator no campo da inteligência artificial e liderar a revolução associada à integração do intelecto humano com a tecnologia de ponta.