Tradução Impacto do Chat GPT-4 Vs. 3.5
A Open AI acaba de lançar o GPT-4, uma versão aprimorada de sua inteligência artificial generativa de última geração.
De acordo com o próprio Chat GPT, a diferença entre os modelos é:
Em linguagem simples, é maior, melhor e mais cruel. O que isso significa em termos de tradução e localização? De acordo com a pesquisa da Open AI:
Em termos simples: Imagine que você é realmente bom em fazer provas na escola. Você sempre se saiu bem em testes de inglês, mas você quer ver se consegue se sair bem em testes em outras línguas também. Então, você faz uma grande prova com 14.000 perguntas em muitas disciplinas diferentes, como matemática, ciências e história.
Para tornar ainda mais difícil, você faz o teste em diferentes idiomas usando uma ferramenta especial que traduz as perguntas para outros idiomas para você. Você tenta em 26 idiomas diferentes, mas apenas 2 deles não funcionam bem.
Surpreendentemente, você se saiu ainda melhor no teste nessas outras línguas do que você se saiu no mesmo teste em inglês. Você se sai muito bem até mesmo em idiomas que não são muito usados, como o letão, o galês e o suaíli.
Isso é mais ou menos o que aconteceu quando testaram um programa de computador chamado GPT-4. É realmente bom em entender perguntas e respondê-las, mesmo quando estão em diferentes idiomas. Ele se saiu melhor do que outros programas similares como GPT-3.5 e Chinchilla, até mesmo para os idiomas mais difíceis.
Vamos comparar alguns exemplos do mundo real em alguns idiomas.
Uma análise rápida desta amostra limitada de 10 frases idiomáticas em inglês americano não revela diferenças significativas entre a saída do GPT-3 e do GPT-4. Isso demonstra que:
O GPT-3 já era bastante impressionante desde o início.
É preciso prestar muita atenção aos detalhes para discernir as diferenças entre GPT-3 e GPT-4.
Ao examinar as sutis diferenças entre os dois, GPT-4 foi em um caso significativamente melhor do que GPT-3, mas também notavelmente pior em outra instância. Na maioria dos casos, era ou idêntico ou ligeiramente melhor.
Os conceitos que se aplicavam ao GPT-3 são ainda mais verdadeiros para o GPT-4. Com mais parâmetros e dados, as prompts se tornam cada vez mais importantes. A menor variação na sugestão de comando pode resultar em resultados substancialmente diferentes. À medida que o modelo de IA se torna mais refinado, é necessária uma maior precisão por parte do usuário.
Em relação a outros idiomas mencionados na pesquisa da OpenAI, em breve realizaremos nossa própria investigação sobre seu desempenho e retornaremos com descobertas sobre qualidade de tradução e oportunidades no contexto de GPT-3 vs. GPT-4.
Série de webinars sobre o ChatGPT
Interessado em aprofundar-se nas aplicações do ChatGPT na indústria de tradução? Participe do nosso webinar dedicado ao ChatGPT