Lionbridges bedömningsverktyg för maskinöversättning

Vi har noterat en trevlig, allmän kvalitetshöjning i Microsofts maskinöversättningsresultat (MT) under perioden 11 oktober till 1 november. Den senaste kvalitetsförbättringen i Bing Translator innebär att alla de största MT-motorerna nu producerar väldigt likartade resultat. Därmed blir också kampen om ledarpositionen ett riktigt spännande lopp.

De främsta MT-motorerna har inte visat några intressanta förbättringar på flera månader. Låt oss hålla tummarna att den här utvecklingen från Microsoft bryter trenden och är början på fler framsteg hos motorerna.

Förutom vår vanliga mätning med en enda referens till översättningar valde vi att även bekräfta Microsofts förbättrade resultat med en andra spårning som omfattade flera referenser. I den här MT-utvärderingen använde vi tio referensöversättningar utförda av mänskliga översättare – den gyllene standarden – i stället för bara en översättning. På så sätt fick vi fram en mer exakt siffra för redigeringsavstånd som tar hänsyn till flera möjliga korrekta översättningar i de slutliga resultaten.

När vi nu närmar oss årets slut kan vi se att MT-resultaten förblev i princip oförändrade under 2022. Vi noterade små förändringar – utvecklingen för Microsofts maskinöversättning i Bing kan faktiskt vara det mest anmärkningsvärda framsteget på hela året. Som vi har sagt tidigare under året ser det ut som om det nuvarande MT-paradigmet har nått en platå. Vi ser fram emot att få veta vad 2023 har att bjuda på inom maskinöversättning.

– Rafa Moral, Lionbridge Vice President, Innovation