Subiect: #Princeton
Un cercetător de la Princeton propune Transformer-ul Recurent în Buclă (RLT) care transportă starea decodorului la fiecare token, fixând 96 de blocuri per token cu adâncime temporală nelimitată
Un cercetător de la Princeton propune Recurrent Looped Transformer (RLT), o arhitectură care transportă starea decodorului la fiecare token, permițând o adâncime temporală nelimitată. Cu 96 de blocuri per token și fără resetare la granițele de servire, RLT ar putea rezolva problema memoriei pe termen lung în modelele lingvistice, deși nu are încă rezultate empirice.
Tehnologie
Thea Energy, startup-ul de fuziune nucleară de la Princeton, strânge 100 de milioane de dolari și intră în elita finanțărilor
Thea Energy, un startup de fuziune nucleară de la Princeton, a strâns 100 de milioane de dolari într-o rundă Seria B, intrând în elita finanțărilor din domeniu. Compania inovează cu magneți reglabili, asemănători pixelilor, pentru a simplifica construcția reactoarelor de tip stellarator, vizând un reactor demonstrativ până în 2030 și unul comercial în 2034.