Apresentando o RND1, o modelo de linguagem de difusão de base (DLM) mais poderoso até o momento. RND1 (Radical Numerics Diffusion) é um DLM experimental com parâmetros 30B (3B ativo) com uma arquitetura MoE esparsa. Estamos tornando-o de código aberto, liberando pesos, detalhes de treinamento e código para catalisar mais pesquisas sobre inferência DLM e pós-treinamento. Somos pesquisadores e engenheiros (DeepMind, Meta, Liquid, Stanford) construindo o mecanismo para o autoaperfeiçoamento recursivo (RSI) - e usando-o para acelerar nosso próprio trabalho. Nosso objetivo é permitir que a IA projete a IA. Estamos contratando.