Chaînes mises à jour récemment

Choisissez-en une pour ne voir qu’elleToutes les chaînes →
Matthew Bermanhier +478Theo - t3․gghier +33AI Engineerhier +6The Buildershier +1a16zhier +2硅谷101hier +1SemiAnalysishier +1Chris WilliamsonhierCheeky PinthierInvest Like The Besthier

Résultats

1 articles
Trier
ThèmeTransformers & attentionPersonneGrant SandersonDuréePlus de 30 min
7 diapositives1:16:29EN
Jane Street· 26 août 2026Grant Sanderson and Alok Puranik: Positional Encodings Through Group TheoryGrant Sanderson, Alok Puranik · 3Blue1BrownStarting with assumptions about attention, they derive matrix exponentials and connect rotations, decay and Jordan blocks to RoPE and ALiBi.Transformers & attentionMathematicsFondamentaux du ML+1