Impact de la traduction: Chat GPT-4 Vs. 3.5

Open AI vient de sortir GPT-4, une version améliorée de son IA générative de pointe.

Selon Chat GPT lui-même, la différence entre les modèles est la suivante :

En termes simples, il est plus grand, meilleur et plus méchant. Que signifie cela en termes de traduction et de localisation ? Selon Open AI Research:

En termes simples: Imaginez que vous êtes vraiment doué pour passer des tests à l'école. Vous avez toujours réussi vos tests en anglais, mais vous voulez voir si vous pouvez aussi réussir des tests dans d'autres langues. Donc, vous passez un gros test avec 14 000 questions dans de nombreuses matières différentes comme les mathématiques, les sciences et l'histoire.

Pour rendre les choses encore plus difficiles, vous passez le test dans différentes langues en utilisant un outil spécial qui traduit les questions dans d'autres langues pour vous. Vous l'essayez dans 26 langues différentes, mais seulement 2 d'entre elles ne fonctionnent pas bien.

Étonnamment, vous réussissez encore mieux le test dans ces autres langues que vous ne l'avez fait lors du même test en anglais. Vous réussissez même très bien dans des langues qui ne sont pas beaucoup utilisées, comme le letton, le gallois et le swahili.

C'est un peu ce qui s'est passé lorsqu'ils ont testé un programme informatique appelé GPT-4. Il est vraiment doué pour comprendre les questions et y répondre, même lorsqu'elles sont dans des langues différentes. Il s'est mieux comporté que d'autres programmes similaires tels que GPT-3.5 et Chinchilla, même pour les langues plus difficiles.

Comparons quelques exemples concrets dans quelques langues.

Une analyse rapide de cet échantillon limité de 10 phrases idiomatiques en anglais américain ne révèle aucune différence majeure entre la sortie de GPT-3 et GPT-4. Cela démontre que :

GPT-3 était déjà assez impressionnant dès le départ.

Il faut prêter une attention particulière aux détails afin de discerner les différences entre GPT-3 et GPT-4.

En examinant les différences subtiles entre les deux, GPT-4 était dans un cas significativement meilleur que GPT-3 mais également notablement moins bon dans un autre cas. Dans la plupart des cas, il était soit identique, soit légèrement meilleur.

Les concepts qui s'appliquaient à GPT-3 sont encore plus vrais pour GPT-4. Avec plus de paramètres et de données, les suggestions de prompts deviennent de plus en plus importantes. La moindre variation dans la suggestion de prompt peut donner des résultats considérablement différents. À mesure que le modèle d'IA devient plus affiné, une plus grande précision est requise de la part de l'utilisateur.

En ce qui concerne les autres langues mentionnées dans la recherche d'OpenAI, nous mènerons bientôt notre propre enquête sur leurs performances et nous reviendrons avec des conclusions sur la qualité de la traduction et les opportunités dans le contexte de GPT-3 vs. GPT-4.

Article ChatGPT
‍Téléchargez notre étude de 55 pages pour une comparaison approfondie entre ChatGPT et les meilleures traductions automatiques du marché.

Série de webinaires sur ChatGPT
‍Vous souhaitez approfondir les applications de ChatGPT dans l'industrie de la traduction ? Rejoignez notre webinaire dédié à ChatGPT

‍