Jak zjistím, zda AI překládá kvalitně? Nabízí Shanyi AI hodnocení kvality (QE)?
“Při hromadném překladu tisíců souborů není možné, aby uživatel všechny individuálně zkontroloval. Potřebují mechanismus, který jim umožní rychle identifikovat potenciálně problematické soubory.”
Analýza hlavní příčiny
Automatické skóre na základě COMET/Kiwi
Po vygenerování překladu spouští Shanyi AI lehký QE (Quality Estimation) model. Model není závislý na referenčním překladu, skóruje přímo sémantickou shodu mezi zdrojovým textem a překladem. Segmenty s příliš nízkým skóre jsou označeny jako ‚vysoké riziko‘.
Detekce nejistoty
LLM při generování produkuje Logprobs (logaritmické pravděpodobnosti). Pokud má AI u všech slov ve větě velmi nízkou jistotu, systém vyhodnotí, že věta může obsahovat halucinace nebo být obtížně přeložitelná, zvýrazní ji v editoru a upozorní na potřebu důkladné kontrolní revize.
Kontrola konzistence formátu
Systém také automaticky kontroluje technické chyby: například pokud jsou ve zdrojovém textu tři čísla, zda jich není v překladu pouze dvě; pokud je v originále na konci otazník, zda nebyl v překladu vynechán. Tyto striktní ukazatele jsou také součástí hodnocení kvality.
Shrnutí konečného řešení
Kvantifikace kvality překladů pomocí dat umožňuje cílenou post-editaci (PE) a výrazně zvyšuje efektivitu.