Parte da série: 27 idiomas, um a um
Polonês: tire um "nie" e "não vou ter filhos" vira "vou ter"
· Zeyu Si
Nesta página
Numa cena entre pai e filho, o filho diz: "Ja nie będę miał dzieci." Não vou ter filhos.
O Speechmatics escreveu "Będę miał dzieci." Um "nie" a menos, e a frase diz o contrário, continuando perfeitamente legível. Foi a única negação invertida que encontramos em quatro trechos em polonês. Essa única fala é o motivo de o Speechmatics não ser uma trilha de referência para o polonês.
Os trechos de teste: quatro filmes, os três níveis de dificuldade
- Dzień świra (2002): diálogo rápido entre pai e filho, som de estúdio limpo. Nosso nível de base, e o trecho que melhor separou os motores.
- Psy (1992): uma batida policial. Trocas rápidas, interrupções, palavrões, ruído de fundo. Nível médio a alto.
- Kiler (1997): um interrogatório em ritmo acelerado, cheio de nomes próprios como modelos de armas e nomes de cidades. Nível médio a alto.
- Wesele (2004): uma festa de casamento desandando. Convidados bêbados gritando uns por cima dos outros, um telefone tocando, ruído constante. Nosso nível mais difícil.
Os quatro são em polonês padrão, sem dialeto regional.
Motores que testamos
A primeira rodada teve quatro: ElevenLabs Scribe v2, AssemblyAI, Speechmatics e Doubao (pl-PL). As transcrições do Soniox vieram de uma rodada separada com todos os motores e foram revisadas depois. O Gemini foi adicionado em agosto de 2026. O Gladia e o Deepgram já tinham falhado em outros idiomas europeus, então não os testamos de novo aqui.
Linhas vermelhas, motor a motor
Speechmatics: além da negação invertida, inseriu três palavras que ninguém disse na cena do casamento, "Myślisz że to" ("você acha que isso").
AssemblyAI: nenhuma frase inventada, nenhuma inversão, mas inventa palavras soltas. "Zjemy" ("vamos comer") apareceu na cena da batida, "otestował" na cena do casamento, e no trecho limpo ele acrescentou "lewicką" ("de esquerda") a uma fala sobre uma jaqueta Levi's.
Doubao: no trecho limpo, durante uma troca rápida sobre peças de Chopin, enfiou "chwalony" ("elogiado"). Todos os motores tiveram dificuldade nesse trecho. Nos dois primeiros trechos, o Doubao marcou inicialmente 111% e 118% e produziu algaravia em inglês. O erro foi nosso: o código de idioma errado o jogou de volta ao modo chinês. Com o código certo, produziu polonês coerente.
Um ponto em que todos falharam: na cena do casamento, alguém diz "Psy go zabrali" ("os tiras levaram ele"). Psy é gíria para polícia. O ElevenLabs e o Doubao ouviram "Wszyscy" ("todo mundo"); o AssemblyAI escreveu "Psego". Quando vários motores falham no mesmo ponto, o problema é o próprio áudio, então não culpamos nenhum deles individualmente.
Mesmo no caos do casamento, nenhum dos quatro inventou uma frase inteira.
Taxas de erro no trecho limpo: ElevenLabs 5,7%, AssemblyAI 7,8%, Doubao 10,2%, Speechmatics 10,6%. O ElevenLabs cometeu um único erro real no trecho inteiro, escrevendo "Iść" em vez de "Idź".
O que escolhemos, e por quê
Principal: ElevenLabs Scribe v2. O mais limpo nos quatro trechos, sem inversões, quase perfeito no trecho limpo.
Referência 1: Soniox. Reavaliado segundo o nosso padrão de zero linhas vermelhas, não teve palavras inventadas, inversões nem falas perdidas nos quatro trechos. Pela mesma régua, o AssemblyAI teve três ou mais invenções leves e perdeu três falas. Na cena do casamento, o Soniox foi o melhor do grupo. Foi o único motor a captar "Co jest?" ("o que está acontecendo?") e o único a acertar o plural "z nimi" ("com eles"). O Doubao escreveu "z nią" ("com ela").
Referência 2: Doubao. Nenhuma inversão, e é construído de forma diferente dos outros, então seus erros tendem a não coincidir com os deles. A inversão de negação é o principal motivo de ele ter ficado com esta vaga no lugar do Speechmatics.
Referência 3: Gemini. Na rodada de agosto, não teve linhas vermelhas em polonês. Nenhuma alucinação ou inversão na cena da batida, com os palavrões intactos. Na cena do casamento, apenas pequenas mudanças de ordem das palavras e de pessoa verbal, e transcreveu mais do que foi realmente dito do que as legendas.
O AssemblyAI é agora o primeiro da fila como reserva.
Evidências contra a nossa escolha
- O Soniox não venceu na primeira passada. Na nossa primeira revisão, no início de julho, concluímos que ele era "preciso no trecho limpo, mas não melhor que o AssemblyAI e o Doubao, e um empate não é motivo para trocar." Alguns dias depois, recontamos com um padrão de linha vermelha mais rigoroso, as invenções leves do AssemblyAI passaram a contar contra ele, e a decisão se inverteu. Uma régua diferente pode dar uma ordem diferente.
- Pela taxa de erro, o AssemblyAI ficou em primeiro no trecho do interrogatório (28,2%).
- O motor principal também erra: o ElevenLabs também não pegou a gíria "Psy".
Ainda em aberto
- Os quatro trechos são filmes. Nenhuma entrevista de pesquisa real.
- Nenhum dialeto testado.
- Nomes próprios (modelos de armas, títulos de Chopin) confundem quase todos os motores. Eles precisam ser corrigidos pela etapa de terminologia que roda depois da transcrição.
Nossa página de transcrição em polonês
Por Zeyu Si