Forord

I dag krysser digitale tegneserier (Manga, Webtoons m.m.) kulturelle grenser i et tempo vi aldri har sett før. For innholdsdistributører og lokaliseringsteam har oversettelse av tegneserier imidlertid alltid vært et effektivitetens «sort hull». Det er langt mer komplisert enn kun å oversette tekst.

Shangyi AI(商译 AI) forsto allerede ved prosjektstart at for å løse dette problemet på en reell måte, kunne vi ikke nøye oss med å lage en «oversetter» – vi måtte utvikle en automatisert motor som faktisk kan erstatte både 'bildebehandlere' og 'typografer'.

Vårt utgangspunkt var å dekonstruere de reelle smertepunktene i denne bransjen.

Utfordring én: Fragmentert «slagmark» – tegneserieformater

Først og fremst står vi overfor manglende enhetlige standarder. Digitale tegneserier finnes i et svært mangfoldig utvalg formater:

1. Arkivformater (CBZ/CBR): Dette er standarden blant entusiaster. I praksis er dette komprimerte bildepakker (ZIP/RAR). Vårt system må kunne pakke ut og lese JPEG/PNG-sekvensene i riktig rekkefølge.
2. Dokumentformat (PDF): Dette er standarden for mange offisielle utgivelser. Behandling av PDF er mer kompleks; dokumentet kan inneholde både bilder, vektorgrafikk og innebygd tekst, og vår parser må kunne håndtere alt dette.
3. Strømmeformat (Webtoons): Dette er det største vekstområdet – og den største utfordringen. Denne typen tegneserier er designet for mobil, og består av en vertikalt rullende bildestrøm. Den har ikke et «side»-konsept; selve oppsettet, luft og linjeskift er en del av fortellingens rytme.

Vår AI-pipeline må kunne motta alle disse formatene og normalisere dem til visuelle og tekstuelle data som lar seg behandle.

Utfordring 2: Det egentlige hinderet – 20 % oversettelse, 80 % «P-bilder»

Når vi undersøker arbeidsflyten til tradisjonelle oversettelsesgrupper eller profesjonelle lokaliseringsmiljøer, finner vi et oppsiktsvekkende faktum: Ren tekstoversettelse utgjør ofte bare 20 % av arbeidsmengden. Den virkelige flaskehalsen ligger i to prosesser forbundet med kunstnerisk arbeid og sterk avhengighet av manuell innsats:

1. Smertens punkt: Omtegning (Redrawing)

• Problem: Lydord (SFX, som «轰！» og «唰») i tegneserier er en del av kunsten, og de er tett integrert med bakgrunn, karakterlinjer og til og med spesialeffekter.
• Manuelt mareritt: Du kan ikke bare «dekke over» det. En bildebehandler (Redrawer) må åpne Photoshop og – som en restaureringsekspert – bruke klonestempel og pensel for manuelt å tegne bakgrunnen frem igjen der den er dekket. Et komplekst lydord som strekker seg over to sider kan kreve flere timers arbeid fra en erfaren grafisk designer.

2. Krevende kunst: Tekstinnsetting (Typesetting)

• Problem: Japansk eller koreansk er ofte svært kortfattet, men ved oversettelse til kinesisk eller engelsk, øker tekstmengden betydelig.
• Manuelt mareritt: Typesetteren må manuelt «presse» den lengre oversettelsen tilbake inn i de opprinnelig faste snakkeboblene. Dette innebærer gjentatte justeringer av skriftstørrelse, linjeskift og tegnavstand, slik at lesbarheten ivaretas uten at det visuelle uttrykket ødelegges. I vertikale tegneserier kreves det i tillegg redesign av leserytmen.

Tradisjonelle AI-oversettelsesverktøy har ingen funksjon i denne delen av prosessen. Word-dokumentene de leverer, er nesten uten nytte for både bildebehandlere og typesettere.

Vår løsning: Den integrerte motoren til «Shangyi AI»

Designprinsippet bak Shangyi AI(商译 AI) er: Vi leverer ikke bare en oversettelse, men det «ferdige sluttproduktet».

For å realisere dette har vi utviklet en intelligent motor som samler OCR, AI-basert bildebehandling og layoutgjenoppretting i én løsning:

1. «Pikselnøyaktig» OCR og layoutanalyse

Vårt første steg er ikke oversettelse, men «dekomponering».

Vår OCR-teknologi er ikke bare i stand til å gjenkjenne tekst, men utfører også layoutanalyse (Layout Analysis). Den identifiserer presist:

• Dialogtekst (Balloon Text): Ligger inne i snakkebobler, må oversettes og erstattes.
• Kunstnerisk tekst (Artistic Text/SFX): Plassert over bildet, krever «utsletting» og «gjengtegning».

Samtidig tolker systemet leseretningen (manga leses fra høyre til venstre, webtoon fra topp til bunn) og danner en indeks for videre prosessering.

2. “Intelligent viskelær”: AI-gjenopptegning og generativ utfylling

Dette er vår kjerne­teknologi. Når OCR har identifisert og fjernet SFX, håndteres de gjenværende «hullene» umiddelbart av vår AI-inpaintingmodell.

• Hvordan fungerer det? Vi benytter ikke en generisk AI-modell, men en dedikert modell trent på store mengder manga-linjeføring og rastereffekter. Den kan «forstå» tegneseriens kunstneriske stil (linjenes tykkelse, skyggelegging, tetthet av rasterpunkter), og generativt «fullføre» bakgrunns- og kantområder.
• Effekt: For enkle bakgrunner utføres dette umiddelbart. For komplekse områder der karakterenes linjer overlapper, reduserer den genererte løsningen behovet for manuelle korrigeringer betydelig. Dette adresserer direkte det største smertepunktet: «nytegning».

3. «Intelligent typograf»: Teknologi for sidereproduksjon

Oversettelse er ikke bare å lime inn teksten på nytt. Vår sidereproduksjonsmotor (Document Reconstruction Engine) overtar hele tekstintegrasjonsprosessen.

• Hvordan fungerer det? Motoren analyserer originaltekstens skrifttype, skriftstørrelse og justering. Når den har mottatt (ofte lengre) oversettelser, beregner den automatisk optimal linjebryting og skriftstørrelsesskalering for å tilpasse teksten perfekt til det opprinnelige tekstfeltet, samtidig som den sikrer best mulig lesbarhet.
• Spesiell optimalisering for webtoons: For webtoons legger motoren vår særlig vekt på den vertikale flytens «pust», slik at linjebrudd og mellomrom tilpasses leserytmen på mobil.

4. «Oversettelse med sjel»: Kontekstsensitivitet

Til slutt kommer selve oversettelsen. Vår oversettelsesmodul er tett integrert med den nevnte visuelle analysen. Under oversettelsen vet den følgende:

• «Denne teksten kommer fra en eksplosjonsformet snakkeboble.»(Bruk en mer intens tone ved oversettelse)
• «Denne teksten kommer fra en tankeboble.»(Bruk indre monolog ved oversettelse)
• «All tekst for denne karakteren.»(Oppretthold karakterens stemme konsekvent)

Avslutning

«商译 AI» har som oppdrag å bruke AI for å oppgradere lokaliseringen av tegneserier fra en arbeidsintensiv «manuell prosess» til en effektiv, automatisert industriflyt. Vi er fullt klar over at AI ikke kan erstatte menneskets kunstneriske skjønn 100 %, men vårt arbeid handler om å frigjøre skapere og oversettere fra 80 % av det repeterende, mekaniske arbeidet, slik at de kan fokusere på de 20 % mest sentrale og kreative oppgavene innen kulturtilpasning og oversettelse.

Vi adresserer ikke bare oversettelsesproblemer, men også utfordringer relatert til kunstnerisk produktivitet.

Om Shangyi AI (商译 AI) >>

Besøk Shangyi AI (商译 AI), og last opp dokumenter for en gratis test nå. >>

PDF-dokumentoversettelsesstrategi: Løsning av formatutfordringer for presis gjengivelse av oppsett og innhold