Impacto da Tradução Chat GPT-4 Vs. 3.5

A Open AI acaba de lançar o GPT-4, uma versão atualizada de sua IA generativa de última geração.

Segundo o próprio Chat GPT, a diferença entre os modelos é:

<blockquote cite="https://openai.com/research/gpt-4">

“I am an advanced AI language model with a larger dataset, more parameters, and better fine-tuning, which enables me to deliver more accurate and relevant responses. Despite these improvements over GPT-3, I still have limitations and may not provide perfect answers.”

</blockquote>

‍

Em linguagem simples, é maior, melhor e mais cruel. O que isso significa em termos de tradução e localização? De acordo com a Open AI Research :

Em termos simples: imagine que você é realmente bom em fazer testes na escola. Você sempre se saiu bem em testes de inglês, mas quer ver se também se sai bem em testes de outros idiomas. Então, você faz um grande teste com 14.000 perguntas em muitas matérias diferentes, como matemática, ciências e história.

Para tornar ainda mais difícil, você faz o teste em diferentes idiomas usando uma ferramenta especial que traduz as perguntas para outros idiomas para você. Você tenta em 26 idiomas diferentes, mas apenas 2 deles não funcionam bem.

Surpreendentemente, você se sai ainda melhor no teste nesses outros idiomas do que no mesmo teste de inglês. Você se sai muito bem até mesmo em idiomas que não são muito usados, como letão, galês e suaíli.

Foi o que aconteceu quando testaram um programa de computador chamado GPT-4. É muito bom entender as perguntas e respondê-las, mesmo quando estão em idiomas diferentes. Ele se saiu melhor do que outros programas semelhantes, como GPT-3.5 e Chinchilla, mesmo para os idiomas mais difíceis.

Vamos comparar alguns exemplos do mundo real em alguns idiomas.

Uma análise rápida dessa amostra limitada de 10 frases idiomáticas em inglês dos EUA não revela grandes diferenças entre a saída de GPT-3 e GPT-4. Isso demonstra que:

GPT-3 já era bastante impressionante para começar.

É preciso prestar muita atenção aos detalhes para discernir as diferenças entre GPT-3 e GPT-4.

Ao examinar as diferenças sutis entre os dois, o GPT-4 foi significativamente melhor em um caso do que o GPT-3, mas também notavelmente pior em outro caso. Na maioria dos casos, era idêntico ou ligeiramente melhor.

Os conceitos aplicados ao GPT-3 são ainda mais verdadeiros para o GPT-4. Com mais parâmetros e dados, os prompts se tornam cada vez mais importantes. A menor variação na sugestão imediata pode produzir resultados substancialmente diferentes. À medida que o modelo de IA se torna mais refinado, maior precisão é exigida do usuário.

Em relação a outros idiomas mencionados na pesquisa da OpenAI, em breve conduziremos nossa própria investigação sobre seu desempenho e retornaremos com resultados sobre qualidade de tradução e oportunidades no contexto de GPT-3 vs. GPT-4.

Papéis ChatGPT
‍ Baixe nosso estudo de 55 páginas para uma comparação de tradução aprofundada entre o ChatGPT e as principais traduções automáticas do mercado.

Série de webinars sobre ChatGPT
‍ Interessado em aprofundar as aplicações do ChatGPT na indústria da tradução? Participe do nosso webinar dedicado ao ChatGPT

‍