Noticias sobre SAMA-ASR

SAMA-ASR propone utilizar incrustaciones semánticas asistidas por traducción e incrustaciones de voz para anclar conjuntamente el estado del decodificador, fusionar la semántica a nivel del discurso y la evidencia acústica antes de la predicción de tokens, proporcionar ASR de bajos recursos con una ruta de mejora intermodal liviana que no depende de texto transcrito adicional y puede adaptarse a los modelos de voz multitarea codificador-decodificador existentes. En comparación con los métodos existentes que se basan únicamente en una transcripción escasa, esta vez se agrega una nueva señal de supervisión semántica entre idiomas.