I dag krydser digitale tegneserier (manga, webtoons m.fl.) kulturelle grænser med en hidtil uset hastighed. For indholdsudgivere og lokaliseringshold har oversættelse af tegneserier dog længe været et effektivitetsmæssigt 'sort hul'. Det er langt fra så enkelt som blot at oversætte tekst.

Shangyi AI(商译 AI) forstod allerede ved projektets begyndelse, at for virkelig at løse dette problem kunne vi ikke nøjes med at lave en 'oversætter' – vi måtte udvikle en automatiseret motor, der kunne erstatte “billedredaktører” og “typografer”.

Vores udgangspunkt var at dekonstruere branchens reelle ømme punkter.

Udfordring 1: En fragmenteret “slagmark” – mangaformater

For det første står vi over for fraværet af en fælles standard. Digitale tegneseriers distributionsformer er yderst forskellige:

Arkivformater (CBZ/CBR): Dette er standarden blandt entusiaster. Grundlæggende er det billedpakker komprimeret som ZIP/RAR. Vores system skal kunne udpakke disse og læse de interne JPEG/PNG-filer i korrekt rækkefølge.
Dokumentformater (PDF): Dette er standarden for mange officielle udgivelser. Håndtering af PDF’er er mere kompleks, da de både kan bestå af billeder, vektorgrafik og indlejret tekst, hvilket kræver, at vores parser kan håndtere begge dele.
Streamingformater (Webtoons): Dette er det største vækstområde og samtidig den største udfordring. Webtoons er udviklet til mobile enheder og består af vertikalt rullende, lange billedstrømme. Den har ikke noget 'side'-koncept; layout, hvidrum og linjeskift er i sig selv en del af den narrative rytme.

Vores AI-pipeline skal kunne 'indtage' alle disse formater og normalisere dem til håndterbare visuelle og tekstuelle data.

Udfordring to: Den egentlige flaskehals – 20 % oversættelse, 80 % 'P-billeder'

Da vi undersøgte traditionelle fansubgrupper eller professionelle lokaliseringshold, opdagede vi en overraskende kendsgerning: ren tekstoversættelse udgør muligvis kun 20 % af arbejdsbyrden. Den egentlige flaskehals findes i to kunstneriske processer, som i høj grad er baseret på manuelt arbejde:

1. Smertenspunkt: Redrawing (genoptegning)

Problem: Onomatopoietika (SFX, såsom “轰！” og “唰”) i manga er en del af kunstværket og integreres dybt med baggrund, karakterstreger og endda visuelle effekter.
Manuel udfordring: Man kan ikke blot 'dække det til'. En retoucher (Redrawer) skal åbne Photoshop og, som en restaureringsekspert, bruge kloningsværktøj og pensel til manuelt at rekonstruere den skjulte baggrund. Et komplekst, tværgående SFX kan kræve flere timers arbejde fra en erfaren grafiker.

2. Den tidskrævende kunst: Typesetting (tekstindsætning)

Udfordring: Japansk og koreansk er ofte meget kortfattede, men når de oversættes til kinesisk eller engelsk, vokser tekstmængden markant.
Manuelt arbejde: Typesettere skal manuelt “presse” de længere oversættelser tilbage i de oprindeligt fastlåste talebobler. Dette indebærer gentagne justeringer af skriftstørrelse, linjeskift og tegnafstand for at sikre læsbarheden uden at gå på kompromis med det visuelle udtryk. For webtoons betyder det desuden redesignet lodret læserytme.

Traditionelle AI-baserede oversættelsesværktøjer er helt utilstrækkelige i denne sammenhæng. De Word-dokumenter, som disse værktøjer leverer, er stort set uanvendelige for grafikere og typesettere.

Vores løsning: den integrerede “Shangyi AI”-motor

Designfilosofien bag Shangyi AI(商译 AI) er: Vi leverer ikke blot en oversættelse, men et “færdigt slutprodukt”.

For at realisere dette har vi udviklet en intelligent motor, der integrerer OCR, AI-tegning og layout-genskabelse i én samlet løsning:

1. “Pixel-niveau” OCR og layoutanalyse

Vores første skridt er ikke at oversætte, men at “dekomponere”.

Vores OCR-teknologi kan ikke kun genkende tekst; endnu vigtigere muliggør den avanceret layout-analyse (Layout Analysis). Den kan præcist adskille:

Ballontekst (Balloon Text): Tekst placeret i talebobler, der skal oversættes og udskiftes.
Kunstnerisk tekst (Artistic Text/SFX): Overlejres på billedet og kræver ”sletning” og ”genoptegning”.

Samtidig forstår systemet læserækkefølgen (manga fra højre mod venstre, webtoon fra top til bund) og opretter indekser til det videre workflow.

2. “Intelligent viskelæder”: AI-genoptegning og generativ udfyldning

Dette er vores kerneteknologi. Når OCR genkender SFX og fjerner det, overtager vores AI inpainting-model straks det efterladte ”hul”.

Hvordan fungerer det? Vi har ikke anvendt en generisk AI-model, men derimod en specialiseret model trænet på store mængder manga-linjetegninger og screentone-stilarter. Den kan 'forstå' mangaens kunstneriske stil (linjernes tykkelse, skyggernes skravering, rasterpunkternes tæthed) og generativt 'udfylde' baggrunds- og kantområder.
Effekt: Ved enkle baggrunde udføres det øjeblikkeligt. Ved komplekse tilfælde, hvor figurlinjer overlapper, reducerer de genererede resultater også i høj grad behovet for manuel efterbearbejdning. Dette løser direkte den største udfordring ved 'redrawing'.

3. “Intelligent typograf”: Layout-rekonstruktionsteknologi

Oversættelse er ikke blot at indsætte teksten igen. Vores layout-rekonstruktionsmotor (Document Reconstruction Engine) overtager opgaven med 'tekstindsættelse'.

Hvordan fungerer det? Motoren analyserer kildetekstens skrifttype, skriftstørrelse og justering. Når den (typisk længere) oversatte tekst foreligger, beregner systemet automatisk den optimale linjebrydning og skalerer skriftstørrelsen for at tilpasse teksten perfekt til den oprindelige talebobles plads og samtidig sikre optimal læsbarhed.
Særlige optimeringer til webtoons: For webtoons lægger vores motor særligt vægt på den vertikale flows 'åndedræt', så linjeskift og mellemrum passer til læserytmen på mobile enheder.

4. “Oversættelse med sjæl”: Kontekstforståelse

Til sidst udføres selve oversættelsen. Vores oversættelsesmodul er nært integreret med den visuelle analyse ovenfor. Under oversættelsen har den kendskab til følgende oplysninger:

“Denne tekst stammer fra en eksplosiv taleboble.”(Anvend en mere intens tone under oversættelsen)
“Denne tekst stammer fra en tankeboble.”(Benyt indre monolog i oversættelsen)
“Al tekst for denne karakter.”(Bevar konsistensen i karakterens tonefald)

Konklusion

Missionen for “Commercial Translation AI” er at udnytte AI til at transformere lokaliseringsarbejdet med manga fra et arbejdskrævende “manufaktursystem” til en effektiv, automatiseret industriel proces. Vi er fuldt ud bevidste om, at AI ikke kan erstatte menneskets kunstneriske sans 100 %, men det, vi arbejder for, er at frigøre skabere og oversættere fra 80 % af det repetitive, mekaniske arbejde, så de kan fokusere på de 20 % mest essentielle kreative og kulturelle lokaliseringsopgaver.

Vi løser ikke kun oversættelsesproblemet, men også udfordringerne med kunstnerisk produktivitet.

Om Shangyi AI(商译 AI) >>

Besøg Shangyi AI(商译 AI), og upload straks dine dokumenter for at få en gratis prøveoplevelse. >>

PDF-dokumentoversættelsesstrategi: Gennembrud i formateringsudfordringer og præcis genskabelse af layout og indhold