FERRAMENTAS LINUX: O Opus 1.5 Audio Codec é capaz de fazer uso extensivo de aprendizado de máquina

terça-feira, 5 de março de 2024

O Opus 1.5 Audio Codec é capaz de fazer uso extensivo de aprendizado de máquina

 


Conheça as novidades do Opus 1.5 ! 

O Opus 1.5, é um formato de áudio de código aberto desenvolvido pela Xiph.Org, recebeu uma atualização significativa que faz amplamente uso de aprendizado de máquina. Vamos explorar os detalhes dessa versão:

Aprendizado de Máquina no Opus 1.5:

  • Esta versão é diferente das anteriores, trazendo muitos recursos novos para melhorar a qualidade geral do áudio. Pela primeira vez, o Opus utiliza técnicas de aprendizado profundo (deep Learning) para processar ou gerar os próprios sinais.
  • Em vez de criar um novo codec ML do zero, a equipe optou por melhorar o Opus de forma totalmente compatível. Isso garante que o Opus continue funcionando em dispositivos mais antigos e fornece um caminho de atualização suave.
  • O aprendizado profundo foi otimizado para rodar facilmente na maioria das CPUs, incluindo telefones, sem exigir GPUs poderosas. Modelos enormes foram evitados para manter a eficiência.

Lidando com Perda de Pacotes:

  • A perda de pacotes é uma das principais frustrações em chamadas de áudio. Para lidar com isso, o Opus 1.5 introduziu o Deep Packet Loss Concealment (PLC).
  • Em vez de usar heurísticas de ocultação cuidadosamente ajustadas, o Opus agora utiliza uma Rede Neural Profunda (DNN) para preencher os pacotes ausentes com áudio plausível.

  • Para habilitar o compilador Deep PLC no Opus,  entre com a opção --enable-deep-plc e configure o nível de complexidade do decodificador para 5 ou mais.

Outras Melhorias:

Além do aprendizado de máquina, o Opus 1.5 traz as otimizações no AVX2 e ARM NEON, maior robustez contra perda de pacotes, melhor qualidade de áudio em baixas taxas de bits e suporte para o ambisonics de 4ª e 5ª ordem.

Lembrando que as novas funcionalidades baseadas em ML estão desativadas por padrão no Opus 1.5, mas podem ser ativadas conforme necessário.

Downloads do Opus 1.5 e mais informações via Opus-Codec.org .







Fonte 

Até a próxima !!

Nenhum comentário:

Postar um comentário