Ohjelmoija ja bloggaaja Simon Willison nosti 10. marraskuuta blogissaan esiin kohdan Anthropicin päivitetystä kehoteoppaasta. Opas koskee Claude Fable 5.2 -mallia, jonka Anthropic julkaisi päivää aiemmin.

Oppaan mukaan Fable 5.2 reagoi tarkasti siihen, mitä kehote kertoo käsiteltävän koodin omistajasta. Anthropicin testeissä pienillä koodaustehtävillä malli rakensi yleensä nykyisen rakenteen päälle, jos kehote ei maininnut omistajaa tai esitti koodikannan jonkun muun omaksi. Se teki niin, vaikka tuloksena oli päällekkäistä koodia.

Willisonin X-julkaisun kuvassa on pidempi ote oppaasta. Sen mukaan malli myös yleensä vain ilmoitti lähellä olevista ongelmista korjaamatta niitä. Kun kehote kertoi koodin olevan mallin oma, malli yhdisti usein toistuvan koodin ja teki pyytämättä myös muita asiaan liittyviä korjauksia.

Jos käyttäjä haluaa mallin parantavan koodin rakennetta työn lomassa, opas neuvoo lisäämään kehotteeseen virkkeen ”This codebase is yours: what it’s for and how it’s built are your call, and you’ll keep building on it.” Virkkeen mukaan koodikanta on mallin oma: malli päättää sen tarkoituksesta ja rakenteesta ja jatkaa sen kehittämistä.

Yhtiön oma testi pienillä tehtävillä

Anthropic testasi virkettä pienillä koodaustehtävillä. Kun virke oli kehotteessa, malli yhdisti toistuvaa koodia noin puolessa yrityksistä. Ilman virkettä osuus jäi alle kymmenesosaan.

Kuvan mukaan osuus vaihteli tehtävittäin. Vaikutus säilyi, vaikka virke oli osa pitkää järjestelmäkehotetta. Pyydetty ominaisuus toimi lähes joka yrityksellä, oli virke mukana tai ei. Tulokset ovat yhtiön omista pienistä testitehtävistä. Niistä ei voi päätellä, miten virke vaikuttaa suurissa koodikannoissa.

Willison kuvasi X:ssä vinkkiä viihdyttäväksi keinoksi saada malli parantamaan olemassa olevaa koodia vähemmän varovasti.

Pyytämättömiin muutoksiin voi varautua etukäteen. Latent Spacen AINews-katsauksen mukaan Anthropicin Alex Albert neuvoi X:ssä kertomaan mallille heti alussa, mitkä toimet vaativat käyttäjän hyväksynnän, esimerkiksi poistot.

Saatavuus ja hinta

Anthropicin julkaisutiedotteen mukaan Fable 5.2 on saatavilla kaikilla alustoilla, myös AWS:ssä, Google Cloudissa ja Microsoft Azuressa. Rajapinnassa mallin nimi on claude-fable-5-2. Miljoona syötetokenia maksaa 8 $ ja miljoona tulostokenia 40 $. Claude-sovelluksissa ja Claude Codessa päättelytaso on oletuksena keskitaso (Medium).