Legenda automática: como um vibe coder corta na frase, não no meio
Legenda automática termina na frase. No Autocut, o vídeo do Dr. Adalberto (1 min 2 s para 0,44) veio com 4 legendas quebradas no meio da fala.
Legenda automática tem que terminar na frase. Se a linha corta no meio da fala, a tela fica feia e quem assiste lê um pedaço solto.
No Autocut do Taurus Hub, Thiago abriu a revisão de legendas de um job com o vídeo cru do Dr. Adalberto, advogado trabalhista. O corte automático levou o vídeo de 1 min 2 s para 0,44 e pegou as palavras certas. Na revisão de legendas a frase saía partida em 4 linhas.
A tela mostra a frase partida em 4 legendas
Ele nomeia o trabalho antes de apontar o defeito: está revisando a parte de legendas da edição de um job no Autocut. O job pediu essa revisão e ele já tinha dito que achou erro. Em seguida descreve o que a tela mostra.
as legendas vem quebrada
A fala do Dr. Adalberto aparecia em 4 recortes. A legenda 1 dizia "no direito do". A legenda 2 dizia "trabalho ou". A legenda 3 dizia "Defesa é feita". A legenda 4 dizia "com precisão matemática".
Ele leu os 4 em voz alta, na ordem. A 1 termina no "do". A 2 começa em "trabalho" e termina no "ou". A 3 diz "Defesa é feita", no meio da frase. A 4 fica sozinha, "com precisão matemática". A frase do advogado trabalhista é uma só e o motor entregou 4 legendas.
O corte de 1 min 2 s para 0,44 já tinha passado. Ele mesmo tinha dito que o Autocut pegou exatamente nas palavras corretas. O erro que ele lê agora está na linha da legenda.
Terminar por frases, com as palavras da própria tela
Ele pediu outro lugar para o fim da linha, com o mesmo texto.
correto seria terminar por frases
A regra usa as mesmas palavras da tela. A linha 1 ficaria "no direito do trabalho". A linha 2 ficaria "ou a defesa". A linha 3 ficaria "é feita com precisão, matemática". O Dr. Adalberto continua dizendo a mesma coisa. O que muda é o ponto em que a legenda automática larga o leitor.
NA REVISÃO
4 legendas partidas
A 1 termina no do. A 2 começa em trabalho
Terminar por frases
no direito do trabalho. ou a defesa. é feita com precisão, matemática
a legenda cortando a frase fica muito feio
Feio, neste job, é o que o cliente do Autocut publicaria. Thiago leu os 4 e devolveu o agrupamento com as palavras que já estavam na tela, antes do render.
O motor de legenda e a hipótese da timeline
No mesmo fôlego ele arrisca de onde vem a quebra e pede a calibração.
eu acho que o nosso motor de legenda, eu não sei como que ele foi construído, talvez em cima da timeline
Se o motor fatia pelo tempo da timeline, a linha cai no instante e a frase fica partida. A timeline do Autocut já mostra o áudio corrido. O corte já tinha acertado as palavras. A legenda automática desta tela parece fatiar pelo tempo e partir a frase no meio.
Calibrar, no pedido dele, é fazer a linha acabar na frase. Enquanto o motor cortar no "do" e mandar o "trabalho" para a linha seguinte, a revisão humana vai juntar o que a máquina partiu.
Ele pergunta se, ao aprovar a legenda, dá para voltar e refazer, e o agente diz que sim: editar e renderizar de novo, sem refazer a análise do vídeo. Isso conserta 1 job na mão, e o pedido para o motor é parar de gerar a quebra.
Ele aprovou para ver o que rolava. Na reprodução a fala do Dr. Adalberto corre inteira: no direito do trabalho, ou a defesa é feita com precisão matemática. Na revisão, essa fala tinha saído em 4 legendas.
O recorte de não gastar 686 mil tokens achando um botão ficou noutro post desta live.
No vibe coding, a linha acaba onde a frase acaba
No vibe coding de um editor, o agente escreve o motor e você lê o que sai na revisão. Thiago leu 4 linhas e devolveu a regra em português: terminar por frases. A timeline entra no pedido como palpite. O critério de aceite está na tela: a legenda automática não corta a frase no meio. Vale ver como isso terminou em overengineering.
Amanhã, no vibe coding do editor, quando o job pedir revisão de legendas, leia a linha como o cliente vai ler. Se a 1 termina em "do" e a 2 começa em "trabalho", a unidade está errada. Peça o corte na frase com 1 exemplo da própria tela, como ele fez com "no direito do trabalho". Confira de novo na revisão. Se precisar aprovar para ver o render, volte e refaça a linha sem rodar a análise outra vez.
Dá para assistir à live e ouvir os 4 recortes, a regra de terminar por frases e o "muito feio" na ordem em que saíram.