Hoje, estamos anunciando nossa arrecadação de fundos - jk. Estamos enviando. Conheça os experimentos com gotas de 🧪 chuva

raindrop experiments é o primeiro conjunto de testes A/B criado para agentes de IA. ele usa seus sinalizadores de recursos existentes (por exemplo, PostHog ou Statsig) e fornece comparações criadas especificamente para agentes de IA. sem sinalizadores de recursos? Não há problema. basta comparar ontem com hoje.

Imagine que você adiciona uma nova ferramenta (ou corrige uma existente). Use experimentos para ver como sua alteração afetou o comportamento do seu agente Há um detalhamento de cada ferramenta: % de eventos para os quais ela é usada, quantas vezes ela é chamada por evento, qual porcentagem de invocações tem erros.

veja como literalmente qualquer coisa mudou... * uso da ferramenta * Intenções do usuário * problemas (incluindo aqueles que você mesmo define!) * Comprimento da resposta * duração da conversa *Propriedades * Dados demográficos do usuário (por exemplo, idioma que eles estão falando) * e muito mais.