Salt la conținut
Global sound
Projets IA

Projets IA

Comment ChatGPT Génère VRAIMENT un Mot (architecture complète) 🤖

· 27 min

Note de episod

Quand tu tapes une phrase dans ChatGPT, que se passe-t-il exactement dans les 0,3 secondes

qui suivent ? Tokenisation, embeddings, attention, MLP, softmax — on décortique

TOUT, dans l'ordre, étape par étape. 🧠

Dans cette vidéo, tu vas suivre le voyage d'une phrase à travers GPT-2 de bout en bout.

Comprends pourquoi les RNN — les réseaux récurrents — ont atteint leurs limites.

Découvre le mécanisme Query/Key/Value qui permet à chaque mot de contextualiser

les autres. Apprends pourquoi le masque causal empêche le modèle de "tricher".

Et maîtrise la façon dont la température, top-k et…

Site: podcast.ausha.co

Live, ultima oră: 6.771 melodii pe 2.608 posturi din 120 țări

Descoperă lumea prin radio

Mai multe moduri de a descoperi (7)

Ai auzit ceva frumos? Salvează-l sau deschide-l direct în Spotify.

★ Artist of the week The fastest riser on the radio this week
Your song here? From € 9 per week →
Callisto radio Continuă să asculți