Olen vain yksi henkilö, ja ohjelmointitarpeeni ovat jokseenkin epätavalliset (erilaisten tilastollisten ennustemallien rakentaminen). Mutta en vain näe LLM:ien johdonmukaista tuottavuuden kasvua, jota olisin odottanut, jos olisit kysynyt minulta 6 kuukautta sitten.

Yksinkertaisissa tehtävissä ne ovat lähes aina hyödyllisiä. Keskivaikeissa tehtävissä jaetaan luultavasti tasan 1) toimii kuin taianomaisesti ensimmäisellä yrittämällä; 2) väärä, mutta suunnallisesti hyödyllinen tai toimii hienosäätöjen jälkeen, ja 3) osoittautuu nettoajanhukkaksi.

Niillä kannattaa yleensä "pelata". Jos minulta menisi 30 minuuttia selvittää jotain itse, ja 1) säästäisi minulta 25 minuuttia, 2) säästäisi minulta 15 minuuttia ja 3) maksaisi minulle 30 minuuttia, odotusarvo on positiivinen. Mutta siellä on silti melko vähän 3).