Caută în știri
5 rezultate pentru „transformer”
- 08:14roboticsMIT combină conceptele Lego și Transformers în blocuri de construcție care își schimbă formaArticolul prezintă cercetări MIT asupra unor blocuri de construcție care își schimbă forma, inspirate de Lego și Transformers. Textul furnizat nu oferă detalii tehnice despre funcționarea sau capacitățile blocurilor.
- 11.10 · 21:21aiModele Lingvistice Byte: Scalare, Abstracții Emergente și Alocarea InformațieiUn nou articol demonstrează că Transformerele standard pot procesa eficient secvențe brute de octeți, depășind modelele tradiționale bazate pe subcuvinte pe măsură ce dimensiunea parametrilor crește. Cercetarea sugerează că lungimea crescută a secvenței în procesarea la nivel de octet oferă o calculare benefică, permițând modelelor să dezvolte abstracții locale implicite și să atingă o pierdere optimă mai mică.
- 25.09 · 21:01aiNVIDIA Îmbunătățește Antrenamentul MoE pentru Modele Biologice cu Câștiguri de EficiențăNVIDIA a introdus o rețetă optimizată de antrenament MoE (Mixture of Experts) pentru modelele fundamentale biologice prin intermediul platformei sale BioNeMo. Această îmbunătățire utilizează tehnici avansate ale Transformer Engine pentru a crește semnificativ debitul, făcând antrenamentul modelelor AI complexe mai eficient.
- 15.09 · 21:01aiMotorul Transformer de la NVIDIA Accelerează Antrenamentul MoE în JAX de 10 OriMotorul Transformer de la NVIDIA a accelerat semnificativ antrenamentul modelelor Dropless Mixture-of-Experts (MoE) în cadrul framework-ului JAX. Această realizare se traduce printr-o creștere remarcabilă a performanței de 10 ori și menține o eficiență de scalare impresionantă de 97%.
- 02.09 · 21:19devVulnerabilitate în Hugging Face Transformers Permite Scrierea de Cod Python Controlat de Atacator Înainte de Consimțământul UtilizatoruluiA fost descoperită o vulnerabilitate critică în biblioteca Hugging Face Transformers, care permite atacatorilor să execute cod Python arbitrar. Acest defect permite actorilor rău intenționați să controleze execuția codului înainte ca utilizatorul să își dea consimțământul explicit, prezentând un risc de securitate semnificativ.
