De P van GPT
De P van GPT staat voor pre-trained. Ik wil gaan begrijpen hoe dat werkt en wat de invloed is van pre-training op de prestaties van GPT en andere taalmodellen. Over de immens grote dataverzamelingen en gebruikt corpus hadden we het…
CN
Dumbing-down
Er komen steeds meer aanwijzingen dat de prestaties van de GPT-modellen (zowel 4 als 3.5) achteruit gaan. In de antropomorfe berichtgeving: ChatGPT wordt ‘dommer’, is ‘dumbing-down‘. Het komt overeen met mijn eigen, niet onderbouwde, gevoel. Bron: How Is ChatGPT’s Behavior…