Hur vet jag om AI-översättningen håller hög kvalitet? Tillhandahåller Shangyi AI en kvalitetsbedömning (QE)?
“Vid översättning av tusentals filer i stor skala är det inte möjligt för användare att granska varje fil individuellt. De behöver en mekanism för att snabbt identifiera vilka filer som kan innebära risk för undermåliga resultat.”
Grundorsaksanalys
Automatisk poängsättning baserad på COMET/Kiwi
Efter att översättningen genererats av Shangyi AI körs en lättviktsmodell för QE (Quality Estimation). Den här modellen är inte beroende av referensöversättningar, utan bedömer direkt källtextens och översättningens semantiska överensstämmelse. Segment med för lågt betyg flaggas som 'högrisk'.
Detektering av osäkerhet
LLM genererar Logprobs (logaritmiska sannolikheter) vid generering. Om AI:ns tillförlitlighet är låg för varje ord i en mening identifierar systemet att meningen kan innehålla hallucinationer eller vara svår att översätta, och markerar den i editorn för att uppmärksamma manuell granskning.
Kontroll av formatkonsistens
Systemet genomför även automatisk kontroll av tekniska fel: till exempel om källtexten har 3 siffror och översättningen endast 2, eller om källtexten avslutas med ett frågetecken som saknas i översättningen. Dessa objektiva kriterier ingår också i kvalitetspoängen.
Sammanfattning av slutgiltig lösning
Kvantifiera översättningskvalitet med data för att möjliggöra målinriktad postredigering (PE) och kraftigt öka effektiviteten.