Noticias sobre ReNFT
1 artículos relacionados
ReNFT: colapso del modo de reparación en la recompensa posterior al entrenamiento mediante recalibración interna de probabilidad-masa
ReNFT: Repairing Mode Collapse in Reward Post-Training via Internal Probability-Mass Recalibration
AI InsightReNFT trata el colapso del modo como una redistribución interna de la masa de probabilidad en lugar de una pérdida de información, y aboga por la reparación desde dentro del generador en lugar de depender de señales externas. Esto significa que la pérdida de diversidad en el entrenamiento posterior a la recompensa puede ser reversible, y se espera que el enfoque de la investigación pase de agregar regularización y cambiar interfaces a utilizar la propia estructura de capacidades del modelo.Importancia 56/100