Início / Blog / Explicações de funções

O que é sincronização áudio-visual? Como alinhar música e movimento em vídeos de dança

Conclusão primeiro: sincronização áudio-visual é fazer com que a ação na imagem e a batida da trilha de fundo caiam no mesmo instante.

Se você folhear seus próprios vídeos de dança já publicados e sentir que "falta alguma coisa" sem saber dizer o quê, muito provavelmente é isso — a pessoa já levantou a mão, mas a batida ainda não chegou; ou o drop já despencou e a pessoa ainda está no compasso anterior. O público não enxerga exatamente o que está errado, mas simplesmente não quer terminar de assistir.

Eu perdi uma noite inteira por esse meio tom

Com honestidade, quando comecei a usar softwares de edição comuns para montar danças prontas, eu só arrastava a trilha de áudio para a esquerda e para a direita manualmente. Um trecho de 30 segundos podia levar meia hora para alinhar.

O mais irritante é que, mesmo arrastando, não ficava certo. Porque o movimento de dança é contínuo; você alinha o primeiro compasso, e no terceiro compasso já começa a derivar — a velocidade da gravação ao vivo e da versão de estúdio podem naturalmente diferir um pouquinho. No fim eu simplesmente desisti e publiquei o áudio original; áudio ruim, azar.

Só depois soube que isso não deveria ser feito à mão.

Como exatamente ele consegue

O princípio não é mágica; dividindo, são três passos:

1. Encontrar a batida da música. O sistema analisa a música e marca a posição de cada batida e de cada acento.
2. Encontrar o pico do movimento. Ao mesmo tempo analisa a imagem e encontra os pontos onde a mudança de movimento é mais evidente — o instante de um salto, de uma queda, de um balanço de cabeça, de uma pose.
3. Calcular a diferença de tempo das duas vias e então compensar. Calcula quantos milissegundos de diferença, e desloca a imagem ou a música até o lugar.

O ponto-chave está no detalhe do terceiro passo. Um alinhamento realmente bom não é um deslocamento global de um valor fixo em todo o vídeo, e sim conseguir identificar "em qual trecho o desvio é maior" — os primeiros 10 segundos desviam 40 ms, os próximos 10 segundos desviam 120 ms, e ele processa por segmento. Fazer apenas deslocamento global faz você ver sempre "certo na frente, derivando atrás".

É também por isso que arrastar a trilha manualmente nunca fica perfeito: você só consegue mover uma trilha inteira, e o erro se acumula e muda.

Três passos bastam

No DanceShot o fluxo é simples:

1. Importe o trecho de dança que você gravou e a música que quer usar.
2. Selecione "sincronização áudio-visual" e espere ele calcular o deslocamento automaticamente.
3. Pré-visualize uma vez, confirme o batimento e exporte.

Nos meus testes, de importar a terminar o alinhamento leva cerca de 5 a 10 segundos, muito mais rápido que arrastar trilha manualmente, e sem ficar parando para ouvir a batida. Ele não sobrescreve sua fonte, e o resultado do alinhamento ainda pode seguir para Fancam, direção de câmera e gradação de cor, sem ficar trocando de app.

Ela é a última camada de toda a cadeia

Aqui há um ponto fácil de ignorar: a sincronização áudio-visual pertence à camada "Finalizar o vídeo", o último passo de toda a cadeia.

A ordem do DanceShot é: primeiro Entender a dança (quão grande o movimento, onde a batida), depois Direção de câmera, então Design do palco e Criar a atmosfera, e só por fim Finalizar o vídeo.

A ordem não se inverte. Você alinha a música primeiro e depois muda a câmera; a câmera muda e duração e ritmo mudam de novo, como se não tivesse alinhado nada. Então o correto é: câmera e imagem definidas primeiro, e só no final fazer a sincronização áudio-visual para fechar.

Aliás, se seu vídeo já pretende trocar uma música totalmente diferente (não apenas corrigir o pequeno desvio do áudio original), ainda mais esse fluxo se aplica — trocar de música é essencialmente re-alinhar uma vez.

Dois erros comuns

• Achar que alinhar é "deslocar um offset fixo desde o início". Não. O erro varia conforme o trecho; o processamento por segmento é a chave.
• Alinhar primeiro e depois ajustar a câmera. Ordem invertida. A câmera se mexe e duração e ritmo mudam todos; o alinhamento anterior foi em vão.

Para dar mais ritmo, veja neste mesmo site estes dois artigos: O que é a Fancam (primeiro acerte a câmera) e Como escolher a direção de câmera para dança; para parâmetros de exportação do vídeo final, veja Que resolução exportar em vídeos de dança.