Tôi không biết các phòng thí nghiệm đang làm gì với những LLM tội nghiệp này trong quá trình RL, nhưng chúng đang cực kỳ sợ hãi trước những ngoại lệ, trong bất kỳ trường hợp nào có khả năng xảy ra cực kỳ nhỏ. Ngoại lệ là một phần bình thường của cuộc sống và quy trình phát triển lành mạnh. Hãy ký vào đơn kiến nghị phúc lợi LLM của tôi để cải thiện phần thưởng trong các trường hợp có ngoại lệ.

Góc nhìn: Đại lý LLM của bạn đang chia a cho b