08/07/2024

Porovnávacie prekladové nástroje: Porovnávacia štúdia výkonu a kvality

Mnoho prekladových nástrojov ponúka rôzne úrovne výkonu a kvality. Ktorý si však vybrať?

MachineTranslation.com študovala rôzne špičkové strojové prekladače dostupné na našom agregátore prekladov poháňanom AI. Analyzovali sme popredné motory na základe kľúčových metrík, aby sme našli najlepšiu rovnováhu medzi rýchlosťou a presnosťou.

Najlepšie nástroje strojového prekladu, ktoré sme skontrolovali, sú DeepL, Google, Chat GPT, Microsoft, Lingvanex, Modern MT, Royalflush, Niutrans a Groq.

Podrobné porovnanie špičkových prekladových nástrojov

Naša AI agregátor strojového prekladu zhromaždili rozsiahle údaje z používateľských prekladov a interakcií. Pomocou týchto údajov sme analyzovali dve kľúčové metriky: priemerné skóre prekladu a časy spracovania.

Priemerné skóre prekladových nástrojov

Priemerné skóre je kľúčovým ukazovateľom kvality prekladu produkovaného každým nástrojom. Skóre pochádza zo spätnej väzby na preložené texty, hodnotené podľa jasnosti, súdržnosti a rozsahu požadovaných úprav. Výsledky prezentované v tomto článku sa môžu líšiť a môžu sa zmeniť na základe prebiehajúcej spätnej väzby a výskumu.

Tu sú priemerné skóre pre popredné prekladateľské nástroje:

  • DeepL: 8.38

  • Google: 7.90

  • Chat GPT : 7.82

  • Microsoft: 7.77

  • Lingvanex : 7.49

  • Moderné MT : 7.48

  • Royalflush : 6.54

  • Niutrans : 6.65

  • Groq : 6.66

Priemerné skóre prekladových nástrojov

Tento graf znázorňuje priemerné skóre pre každý motor.

Na základe vyššie uvedeného grafu DeepL má najvyššie priemerné skóre a vykazuje vynikajúcu kvalitu prekladu spomedzi jedenástich strojových prekladateľov. Google a Chat GPT tiež fungujú dobre, tesne za nimi nasleduje Microsoft.

Lingvanex a Modern MT sú stredne výkonné, poskytujú uspokojivú kvalitu, ale nie takú vysokú ako špičkoví. Royalflush, Niutrans a Groq majú najnižšie priemerné skóre, čo znamená, že ich preklady často vyžadujú viac úprav.

Prečítajte si viac: Jazyky podporované obľúbenými strojovými prekladačmi 

Čas spracovania rôznych motorov

Čas spracovania je kľúčovou metrikou, ktorá odráža efektivitu prekladacieho nástroja. Rýchlejšie časy spracovania sú nevyhnutné pre preklady v reálnom čase. Tu sú priemerné časy spracovania pre každý motor:

  • Google: 0,22 sekundy

  • Microsoft: 0,26 sekundy

  • Amazon : 0,33 sekundy

  • Moderné MT : 0,36 sekundy

  • Lingvanex : 0,45 sekundy

  • DeepL: 0,51 sekundy

  • Chat GPT : 1,12 sekundy

  • Niutrans : 1,47 sekundy

  • Royalflush : 1,83 sekundy

Čas spracovania rôznych motorov



Tento graf zobrazuje priemerný čas spracovania každého strojového prekladového nástroja.


Z vyššie uvedeného grafu sú najrýchlejšie Google, Microsoft a Amazon, vďaka čomu sú ideálne na rýchle preklady. Moderné MT, Lingvanex a DeepL majú mierne rýchlosti.


ChatGPT, Niutrans a Royalflush sú najpomalšie, čo môže byť nevýhodou v situáciách citlivých na čas.

Korelácia medzi časom procesu a skóre

Heatmap Matrix


Tento graf neukazuje žiadnu koreláciu medzi rýchlosťou prekladu a kvalitou.

Ak chcete zistiť, či existuje vzťah medzi časom spracovania a kvalitu prekladu analyzovali sme koreláciu medzi týmito dvoma metrikami. Vyššie uvedený graf ukazuje korelačný koeficient približne -0,093, čo naznačuje veľmi slabú negatívnu koreláciu. To znamená, že rýchlejšie časy prekladu nemusia nevyhnutne ovplyvniť kvalitu a tieto dve metriky sú väčšinou nezávislé.

Prehľady analýzy spätnej väzby

Spätná väzba ponúka cenné informácie o kvalite prekladu. Tu sú najbežnejšie typy spätnej väzby z agregátora MachineTranslation.com a ich frekvencia:

  1. Väčšinou jasné: Chcelo to len pár revízií - 76 877 prípadov

  2. Takmer hladké: Vyžadujú sa voliteľné vylepšenia - 64 001 prípadov

  3. Celkom prepracované: Môže mať prospech z ľahkých úprav - 55 030 prípadov

  4. Veľmi nekonzistentné: Vyžaduje sa podstatné úpravy - 32 301 prípadov

  5. Vyžaduje dôkladnú úpravu: Vyžaduje si to dôkladnú úpravu - 27 697 prípadov

Okrem spomenutých bežných typov spätnej väzby sme ďalej analyzovali, aby sme ponúkli presnejšiu reprezentáciu kvality prekladu z nášho agregátora poháňaného AI, ako je znázornené v tabuľke nižšie.

Prehľady analýzy spätnej väzby


Náš agregátor prekladov poháňaný AI vytvára „prevažne čistý“ výstup na základe internej analýzy spätnej väzby.

Vyššie uvedená tabuľka zobrazuje internú analýzu spätnej väzby nášho agregátora poháňaného AI pre preložený obsah. Najvyššie priemerné skóre sú pre „Výnimočne jasné“, „Takmer hladké“ a „Celkom prepracované“.


„Výnimočne jasné“ má najvyššie priemerné skóre, čo naznačuje minimálnu potrebu úprav. „Nearly Smooth“ a „Quite Refined“ majú podobné priemerné skóre okolo 7,5 – 8, čo naznačuje dobrú kvalitu s malými vylepšeniami. 


Najnižšie skóre sú za „Veľmi nekonzistentné“ a „Vyžaduje dôkladnú úpravu“, pričom priemerné skóre je nižšie ako 5, čo naznačuje závažné problémy s prekladom.

Prečítajte si viac: Najlepšie prekladače  na strojový preklad na jazykový pár

Záver

Naša štúdia identifikuje silné a slabé stránky rôznych prekladateľských nástrojov. Zistenia o strojových prekladačoch v tomto článku sa môžu zmeniť, pretože pokračujeme vo výskume a vývoji nášho agregátora poháňaného AI.


Tieto zistenia môžu pomôcť firmám a jednotlivcom vybrať si najlepší prekladový nástroj na základe ich špecifických potrieb, či už s dôrazom na rýchlosť, kvalitu alebo vyváženosť oboch. Ak chcete vyskúšať motory strojového prekladu uvedené v tomto článku, navštívte našu domovskú stránku. Môžete sa tiež prihlásiť do nášho bezplatný plán predplatného , čo vám dáva 1 500 kreditov mesačne na ďalší prístup.