dzisiaj ogłaszamy nasze fundusze-- żartuję. Wysyłamy. poznaj eksperymenty raindrop 🧪

Eksperymenty z kroplami deszczu to pierwsza suite A/B testów stworzona dla agentów AI. Wykorzystuje twoje istniejące flagi funkcji (np. PostHog lub Statsig) i daje ci porównania stworzone specjalnie dla agentów AI. Nie masz flag funkcji? Żaden problem. Po prostu porównaj wczoraj z dzisiaj.

wyobraź sobie, że dodajesz nowe narzędzie (lub naprawiasz istniejące). użyj eksperymentów, aby zobaczyć, jak twoja zmiana wpłynęła na zachowanie twojego agenta. jest podział na każde narzędzie: % zdarzeń, w których jest używane, ile razy jest wywoływane na zdarzenie, jaki procent wywołań ma błędy.

zobacz, jak dosłownie wszystko się zmieniło... * użycie narzędzi * intencje użytkowników * problemy (w tym te, które sam zdefiniujesz!) * długość odpowiedzi * czas rozmowy * właściwości * demografia użytkowników (np. język, którym się posługują) * i wiele więcej.