GPT-3
 | |||
  | |||
| Tipus | Model de llenguatge per a aprenentatge profund | ||
|---|---|---|---|
| Data d'anunci | 28 maig 2020 | ||
| Versió inicial | maig del 2020 | ||
| Versió estable | 175B
| ||
| Ús | processament del llenguatge natural i generació de llenguatge natural | ||
| Llicència | Microsoft | ||
| Part de | OpenAI API | ||
| Característiques tècniques | |||
| Utilitza | aprenentatge per transferència i aprenenentatge no supervisat | ||
| Utilitzat per | OpenAI API i ChatGPT | ||
| Equip | |||
| Desenvolupador(s) | OpenAI | ||
Fonts de codi
| |||
| Més informació | |||
| Lloc web | openai.com/blog/openai-api/ | ||
| Id. Subreddit | GPT3 | ||
|
| |||
GPT-3 (acrònim anglès de Generative Pre-trained Transformer 3, transformador generador preentrenat) és un model de llenguatge autorregressiu que empra tècniques de l'aprenentatge profund per a desenvolupar textos que simulen la redacció humana.[1] GPT-3 és la tercera generació creada per l'empresa-laboratori OpenAI dedicada a la recerca dins l'àmbit de la intel·ligència artificial, i molt usada en aplicacions d’IA poc exigents.[2][3] Existeix una versió intermèdia GPT-3.5 i una versió avançada del model, anomenada GPT-4. El febrer de 2025 es va presentar la nova versió GPT-4.5, que incorpora millores significatives.
GPT-3 està format pels següents conjunts de dades preentrenats:
| Conjunt de dades
(Dataset) |
Nombre d'Entrades
(# Tokens) |
Percentatge del total |
|---|---|---|
| Common Crawl | 410 mil milions | 60% |
| WebText2 | 19 mil milions | 22% |
| Books1 | 12 mil milions | 8% |
| Books2 | 55 mil milions | 8% |
| Viquipèdia | 3 mil milions | 3% |
Referències
- ↑ «What is GPT-3? Everything You Need to Know» (en anglès). https://www.techtarget.com.[Consulta: 13 juny 2022].
- ↑ «What Is GPT-3: How It Works and Why You Should Care» (en anglès). https://www.twilio.com.[Consulta: 13 juny 2022].
- ↑ «GPT-3» (en anglès). https://honest-ai.com,10-08-2020.[Consulta: 13 juny 2022].