Claude (model lingüístic)

Claude (model lingüístic)

Tipus	Intel·ligència artificial
Versió inicial	14 març 2023
Versió estable	Claude 3.5 (20 juny 2024)
Equip
Desenvolupador(s)	Anthropic
Més informació
Lloc web	claude.ai (anglès)

Claude és una família de grans models lingüístics desenvolupats per Anthropic.^[1] El primer model es va llançar el març de 2023. Claude 3, llançat el març de 2024, també pot analitzar imatges.^[2]

Entrenament

Els models Claude són transformadors generatius pre-entrenats. Han estat entrenats prèviament per predir la paraula següent en grans quantitats de text. Els models Claude s'han afinat amb l'IA constitucional amb l'objectiu de fer-los útils, honestos i inofensius.^[3]

IA constitucional

La IA constitucional és un enfocament desenvolupat per Anthropic per entrenar sistemes d'IA, especialment models lingüístics com Claude, perquè siguin inofensius i útils sense dependre d'amplis comentaris humans. El mètode, detallat a l'article "Constitutional AI: Harmlessness from AI Feedback" inclou dues fases: aprenentatge supervisat i aprenentatge de reforç.^[4]

En la fase d'aprenentatge supervisat, el model genera respostes a les indicacions, autocrítica aquestes respostes a partir d'un conjunt de principis rectors (una "constitució") i revisa les respostes. A continuació, el model s'ajusta amb precisió a aquestes respostes revisades.^[5]

Per a la fase d'aprenentatge de reforç a partir de la retroalimentació d'IA (RLAIF), les respostes es generen i es comparen segons el seu compliment amb la constitució. Aquest conjunt de dades de retroalimentació d'IA s'utilitza per entrenar un model de preferències que avalua les respostes en funció de la mesura que compleixen la constitució. A continuació, Claude s'ajusta per alinear-se amb aquest model de preferències.^[6][7]

Aquest enfocament permet la formació d'assistents d'IA que són útils i inofensius, i que poden explicar les seves objeccions a les sol·licituds nocives, millorant la transparència i reduint la dependència de la supervisió humana.^[8]

La "constitució" per a Claude incloïa 75 punts, incloent seccions de la Declaració Universal dels Drets Humans de l'ONU.

Models

Claude

Claude va ser la versió inicial del model lingüístic d'Anthropic publicada el març de 2023, ^[9] Claude va demostrar competència en diverses tasques però tenia certes limitacions en les capacitats de codificació, matemàtiques i raonament.^[10] Anthropic es va associar amb empreses com Notion (programari de productivitat) i Quora (per ajudar a desenvolupar el chatbot de Poe ).^[10]

Claude Instant

Claude es va publicar en dues versions, Claude i Claude Instant, amb Claude Instant una versió més ràpida, menys costosa i més lleugera. Claude Instant té una longitud de context d'entrada de 100.000 fitxes (que correspon a unes 75.000 paraules).

Claude 2

Claude 2 va ser la següent iteració important de Claude, que va ser llançada l'11 de juliol de 2023 i disponible per al públic en general, mentre que Claude 1 només estava disponible per a usuaris seleccionats aprovats per Anthropic.^[11]

Claude 2 va ampliar la seva finestra de context de 9.000 fitxes a 100.000 fitxes.^[12] Les característiques inclouen la possibilitat de carregar PDF i altres documents que permeten a Claude llegir, resumir i ajudar amb les tasques.

Claude 2 va ampliar la seva finestra de context de 9.000 fitxes a 100.000 fitxes.^[13] Les característiques inclouen la possibilitat de carregar PDF i altres documents que permeten a Claude llegir, resumir i ajudar amb les tasques.

Claude 3

Claude 3 es va publicar el 14 de març de 2024 amb afirmacions en el comunicat de premsa d'haver establert nous punts de referència de la indústria en una àmplia gamma de tasques cognitives. La família Claude 3 inclou tres models d'última generació en ordre ascendent de capacitat: Haiku, Sonnet i Opus. La versió predeterminada de Claude 3 Opus té una finestra de context de 200.000 fitxes, però s'està ampliant a 1 milió per a casos d'ús específics.^[14][15]

Sembla que Claude 3 realitza un raonament metacognitiu, inclosa la capacitat d'adonar-se que s'està provant artificialment durant les avaluacions d'agulla en un paller.^[16]

Referències

1. Davis, Wes. «OpenAI rival Anthropic makes its Claude chatbot even more useful» (en anglès). The Verge, 21-11-2023. [Consulta: 23 gener 2024].
2. Whitney, Lance. «Anthropic's Claude 3 chatbot claims to outperform ChatGPT, Gemini» (en anglès). ZDNET, 04-03-2024. [Consulta: 5 març 2024].
3. «Claude’s Constitution» (en anglès). Anthropic, 09-05-2023. [Consulta: 26 març 2024].
4. «Claude’s Constitution» (en anglès). Anthropic, 09-05-2023. [Consulta: 26 març 2024].
5. «Claude’s Constitution» (en anglès). Anthropic, 09-05-2023. [Consulta: 26 març 2024].
6. Eliot, Lance. «Latest Generative AI Boldly Labeled As Constitutional AI Such As Claude By Anthropic Has Heart In The Right Place, Says AI Ethics And AI Law» (en anglès). Forbes, 25-05-2023. [Consulta: 27 març 2024].
7. «Claude’s Constitution» (en anglès). Anthropic, 09-05-2023. [Consulta: 26 març 2024].
8. Mok, Aaron. «A ChatGPT rival just published a new constitution to level up its AI guardrails, and prevent toxic and racist responses» (en anglès americà). Business Insider. [Consulta: 23 gener 2024].
9. Drapkin, Aaron. «What Is Claude AI and Anthropic? ChatGPT's Rival Explained» (en anglès americà). Tech.co, 27-10-2023. [Consulta: 23 gener 2024].
10. «Introducing Claude» (en anglès). Anthropic, 14-03-2023.
11. Matthews, Dylan. «The $1 billion gamble to ensure AI doesn't destroy humanity» (en anglès). Vox, 17-07-2023. [Consulta: 23 gener 2024].
12. Drapkin, Aaron. «What Is Claude AI and Anthropic? ChatGPT's Rival Explained» (en anglès americà). Tech.co, 27-10-2023. [Consulta: 23 gener 2024].
13. Drapkin, Aaron. «What Is Claude AI and Anthropic? ChatGPT's Rival Explained» (en anglès americà). Tech.co, 27-10-2023. [Consulta: 23 gener 2024].
14. «Introducing the next generation of Claude» (en anglès). Anthropic. [Consulta: 4 març 2024].
15. Whitney, Lance. «Anthropic's Claude 3 chatbot claims to outperform ChatGPT, Gemini» (en anglès). ZDNET, 04-03-2024. [Consulta: 5 març 2024].
16. Edwards, Benj. «Anthropic’s Claude 3 causes stir by seeming to realize when it was being tested» (en anglès americà). Ars Technica, 05-03-2024. [Consulta: 9 març 2024].