概要
當前平臺提供的翻譯服務(wù)主要由兩家供應(yīng)商Google及MicroSoft提供,但二者各有缺陷:MicroSoft服務(wù)會間歇性異常導致服務(wù)不可用;而Google價格高昂。鑒于此,平臺計劃引入Amazon翻譯服務(wù),平衡二者的缺陷。
在正式接入Amazon翻譯之前,平臺借助本地化部門對三家服務(wù)商做了一次單盲測試,以評估各服務(wù)商對七大主要語種(簡體中文、法語、德語、西班牙語、俄語、日語、韓語)的翻譯質(zhì)量。得分以3分最高、1分最低,標準如下:
3分:意思正確,語句通順
2分:基本正確,貼近自然語言
1分:不知所云
該評分標準除了可以區(qū)分翻譯結(jié)果的相對高低,也能反應(yīng)各服務(wù)商翻譯各語種的真實水平。
評分統(tǒng)計
經(jīng)人工評判后的各語言對的得分結(jié)果取加權(quán)值,計算公式為:
所的分數(shù)的范圍即為[1,3]。基于不同供應(yīng)商對不同語種翻譯質(zhì)量層次不齊的考慮,以下分別列出各語言對的平分結(jié)果。
1.英文 ——> 簡體中文(翻譯語料:3000L)
| 供應(yīng)商/得分 | 1 | 2 | 3 | 加權(quán)值 | 備注 |
|---|---|---|---|---|---|
| 1281 | 1032 | 687 | 1.802 | ||
| MicroSoft | 1547 | 887 | 566 | 1.673 | |
| Amazon | 1682 | 880 | 438 | 1.585 |
2.英文 ——> 法語(翻譯語料:4118L)
| 供應(yīng)商/得分 | 1 | 2 | 3 | 加權(quán)值 | 備注 |
|---|---|---|---|---|---|
| 1146 | 2646 | 326 | 1.801 | ||
| MicroSoft | 1344 | 2426 | 348 | 1.758 | |
| Amazon | 1221 | 2541 | 356 | 1.790 |
3.英文 ——> 德語(翻譯語料:3100L)
| 供應(yīng)商/得分 | 1 | 2 | 3 | 加權(quán)值 | 備注 |
|---|---|---|---|---|---|
| 638 | 736 | 1868 | 2.379 | ||
| MicroSoft | 1007 | 880 | 1355 | 2.107 | |
| Amazon | 760 | 953 | 1528 | 2.237 |
4.英文 ——> 西班牙語(翻譯語料:3000L)
| 供應(yīng)商/得分 | 1 | 2 | 3 | 加權(quán)值 | 備注 |
|---|---|---|---|---|---|
| 139 | 1139 | 1682 | 2.521 | ||
| MicroSoft | 223 | 1441 | 1295 | 2.362 | |
| Amazon | 210 | 1357 | 1389 | 2.399 |
5.英文 ——> 俄語(翻譯語料:3000L)
| 供應(yīng)商/得分 | 1 | 2 | 3 | 加權(quán)值 | 備注 |
|---|---|---|---|---|---|
| 2038 | 503 | 467 | 1.478 | ||
| MicroSoft | 2453 | 308 | 248 | 1.267 | |
| Amazon | 2197 | 438 | 372 | 1.393 |
6.英文 ——> 日語(翻譯語料:2600L)
| 供應(yīng)商/得分 | 1 | 2 | 3 | 加權(quán)值 | 備注 |
|---|---|---|---|---|---|
| 208 | 920 | 1471 | 2.486 | ||
| MicroSoft | 231 | 984 | 1384 | 2.443 | |
| Amazon | 220 | 958 | 1421 | 2.462 |
7.英文 ——> 韓語(翻譯語料:3000L)
| 供應(yīng)商/得分 | 1 | 2 | 3 | 加權(quán)值 | 備注 |
|---|---|---|---|---|---|
| 1647 | 780 | 572 | 1.642 | ||
| MicroSoft | 1800 | 698 | 501 | 1.567 | |
| Amazon | 1681 | 747 | 570 | 1.629 |
綜合結(jié)論
綜合針對三家供應(yīng)商對以上各語種的表現(xiàn),可以發(fā)現(xiàn)三家的翻譯質(zhì)量排序:Google > Amazon > MicroSoft,具體分值見翻譯質(zhì)量評估表。
三家對各語言的翻譯質(zhì)量上整體比較相近,其中在英語翻譯為德語、西班牙語、韓語時整體表現(xiàn)優(yōu)于其他語言。