Attention is differentiable compositionality. Transformers are neurosymbolic machines.
-
-
Kiitos. Käytämme tätä aikajanasi parantamiseen. KumoaKumoa
-
-
-
Guys please help me decode that, I got nothing
-
I have been saying that attentions are compressed differentiable knowledge graphs. I think Pedro means the same here.
Keskustelun loppu
Uusi keskustelu -
-
-
Tämä twiitti ei ole saatavilla.
-
Forthcoming.
Keskustelun loppu
-
-
-
A new ML tribe?
Kiitos. Käytämme tätä aikajanasi parantamiseen. KumoaKumoa
-
-
-
Don’t you think that the rate of convergence (speed of following the gradient) is inherently slower than in humans?
Kiitos. Käytämme tätä aikajanasi parantamiseen. KumoaKumoa
-
-
-
I know what each of those words means individually.
Kiitos. Käytämme tätä aikajanasi parantamiseen. KumoaKumoa
-
-
-
"neurosymbolic" is a stretch, unless you change the definition of symbols to mean clusters of similar sparse representations. But then that is by definition sub-symbolic, so
Kiitos. Käytämme tätä aikajanasi parantamiseen. KumoaKumoa
-
-
-
The link is stale, though.
- Näytä vastaukset
Uusi keskustelu
Lataaminen näyttää kestävän hetken.
Twitter saattaa olla ruuhkautunut tai ongelma on muuten hetkellinen. Yritä uudelleen tai käy Twitterin tilasivulla saadaksesi lisätietoja.