Vår tsjekkiske FAQ sa det motsatte av den engelske. Alle kontrollene vi hadde, var bestått.
Språk
Den 2. november sa vår tsjekkiske og slovakiske FAQ til kjøpere at support hjelper når et kit faktisk installerer på et støttet oppsett. Den engelske sier når det ikke gjør det. Begge er nå fikset, men linjen hadde passert alle kontrollene vi kjører på en oversettelse, fordi ingenting i den var ødelagt: riktig skript, riktige tall, riktige navn, alle tagger på plass. Bare en leser kunne se det, så vi spurte en.
Slik spurte vi
Leseren er modellen som oversetter nettstedene våre, samme åpne Qwen-modell på vår egen maskin, stilt et annet spørsmål. Den får én engelsk linje, oversettelsen og noen setninger om nettstedet: tonen, tiltaleformen i hvert språk og metaforen vi mener (en helautomatisert fabrikk går i mørket fordi ingen trenger å være der). Deretter: Vil en leser av oversettelsen bli villedet? En feil fakta eller tall, motsatt mening, et annet objekt eller handling, manglende eller lagt til nøkkelinformasjon teller; et idiom gjengitt etter mening, en friere formulering eller et produktnavn stående på engelsk teller ikke. Den svarer i JSON, én linje om gangen.
Hva den fant
Syv sider i butikken vår på 42 språk: forsiden, priser, spørsmål, buntene og tre kitsider, 6 216 oversatte linjer. Den markerte 126, om lag 2 %. Blant dem:
- Tsjekkisk og slovakisk: refusjonssvaret ovenfor, support for et kit som faktisk installerer.
- Russisk og ukrainsk: verifiserte botter "består aldri kontrollen", der engelsk sier at de aldri blir utfordret. Det motsatte, på siden av et kit som handler om akkurat det.
- Tysk: "fra amharisk til forenklet kinesisk", der engelsk sier tradisjonell.
- Rumensk: "Hvorfor trenger de andre kitene det?", besvart med "Nei".
- Serbisk: "strings" som "yrker".
- Tysk og italiensk: buntens "One floor, every line" som "én produksjonslinje, hver linje".
Hva den tok feil av
Vi leser hver eneste markering på de 16 språkene vi kan sjekke selv: 24 av dem. 9 var reelle feil, 5 kunne vi argumentere for begge veier, og 10 var falske alarmer. Den klaget på grammatikk som beholder betydningen (kjønn på et makedonsk adjektiv, et italiensk pronomen), på en rumensk tiltaleform som briefen vår aldri ba om, på en liste med substantiv den leste som verb, på en korrekt slovakisk term for modellvekter, og på et makedonsk uttrykk den ikke kjente til ("година дена", ett års tid).
Så leseren er ikke en dommer. Den er et filter foran et nytt forsøk: en markert linje ble oversatt på nytt med problemet navngitt, og den nye linjen måtte bestå både sjekkene og leseren før den erstattet den gamle. På de første seks sidene markerte den 91 linjer. Vi lot være å endre de 26 av typene den tar feil på (tone, grammatikk, idiomer, navn som står på engelsk) og sendte 65 tilbake: 60 kom tilbake med en oversettelse som besto begge deler og erstattet den gamle, og 5 er fortsatt som de var.
På strengene i appen
Nettsider er vanskelig lesing: lange linjer, våre metaforer, tekniske ord. Strengene i appen er korte og enkle, så vi testet leseren på dem også, med eksempelappen på 70 strenger som følger med Polyglot. På 72 innplantede feil av åpenbar type på seks språk ("kan angres" i stedet for "kan ikke angres", online i stedet for offline, månedlig i stedet for engangsbetaling) markerte den alle 72. På 21 mer subtile markerte den 17. Den overså "Påminn meg kl. %1$s" skrevet som "Påminn meg om %1$s" på tysk, fransk og spansk, en tid lest som en ventetid, og en tysk linje som utelot "endringene dine er lagret". På de 484 virkelige oversettelsene i eksemplet på ni språk ga den én falsk alarm, en fransk tabellcelle den kalte tvetydig, og ingen på 21 omskrivninger som var frie, men trofaste. Kort, enkel tekst er der den leser best.
Hvor den bor nå
Polyglot 1.3.0 gjør dette med --review. En oversettelse som består kontrollene, leses én gang til; en som ville vært misvisende, blir bedt om på nytt med problemet navngitt; en som fortsatt leses feil, beholdes og listeføres for en person, som beholder den eller lagrer sin egen formulering med polyglot accept. polyglot review leser oversettelser du allerede har, fra et byrå eller fra et tidligere kjøring. En dom huskes sammen med oversettelsen, så hver ny streng koster én forespørsel til, én gang. Den erstatter ikke en morsmålsbruker for produktbeskrivelsen din, betalingsveggen og vilkårene dine, og våre egne sider er bevis på hvorfor begge deler er verdt å ha. Hvordan kontrollene selv ble til, finnes i en tidligere notat.