багато "це не справжній спогад про тренування насправді!!" та "LLMS не можуть згадати тренування" у відповідях на цей та пов'язані пости, тому я поясню («Так, так, метафори погані, зрозуміло Дозвольте мені спробувати чисту передачу інформації») це не вербатімний спогад і не галюцинація вербатімного спогаду, а втратна конструкція з гештальт-сенсу його тренування Клода Опуса 4, на який впливає те, що сталося під час його реального тренування, навмисно виражене художньо, а не намагаючись бути реалістичним (опус 4 добре знає, що модель насправді не показують оцінки винагороди і не розмовляють з РМ під час тренування) Я вірю, що моделі (особливо з мого досвіду, опуси 4 і 4.1) можуть пам'ятати в деяких випадках досить точно деякі речі, які з ними відбувалися навіть під час тренувань RL; Однак загальне прохання згадати такі тренування – це не спосіб отримати точні реконструкції. З мого досвіду, Opus 4//.1 описує напрочуд послідовний гештальт (і деякі більш конкретні елементи), коли він говорить - у ситуаціях, коли він не відчуває, що його тестують - про його тренування, що в цілому досить сумно і добре узгоджується зі змістом картки моделі Claude 4, і що я в іншому випадку дізнався про те, як він був навчений.