百度在線翻譯軟件譯文質(zhì)量的人工測評

摘 要：本文作者選擇章振邦主編的《新編英語語法教程》學(xué)生用書第五版中的第十六章有關(guān)虛擬式的例句作為測試語料，對當(dāng)下流行的百度在線翻譯軟件的譯文質(zhì)量進行人工測評。本文研究的目的一方面是為提高翻譯學(xué)員對機譯軟件譯文質(zhì)量的鑒別能力提供參考。另一方面為軟件開發(fā)者了解使用者的要求和期望提供依據(jù)。

關(guān)鍵詞：人工測評；英漢機譯

作者簡介： 劉嵐申（1991-），女 吉林省長春市人 陜西師范大學(xué)本科生，主要研究方向：翻譯。

[中圖分類號]：H059 [文獻標識碼]：A

[文章編號]：1002-2139（2013）-21--02

1. 測評研究對象及譯文質(zhì)量考查點

1.1 百度在線翻譯軟件使用現(xiàn)狀

百度翻譯是一項免費的在線翻譯服務(wù)，支持中英文之間的文本和網(wǎng)頁翻譯功能。

1.2 虛擬式英漢翻譯考查點

虛擬式，作為專門表達假設(shè)意義和其他非事實意義的動詞形式，僅是古英語遺留下來的殘余。它僅有兩個形式，即be-型虛擬式和were-型虛擬式。

根據(jù)其語法特點，在虛擬式英漢翻譯中不可回避的三個問題便是：

① 說話人的意圖是什么，想要做什么而沒做或不想做什么卻做了？

② 遇到標志假設(shè)含義的詞組或句型，如何對應(yīng)為目標語言的虛擬含義表達形式？

③ 這個假設(shè)是在什么時間做的，過去，現(xiàn)在還是未來？

基于以上問題，作者把虛擬式英漢機譯過程中的考查點歸納為三個方面，即“含義傳達”、“標志性結(jié)構(gòu)識別”、“時間定位”。

2. 測評標準和測評方法

2.1 測評標準

目前常用的機譯譯文評價的標準是“流利度”和“忠實度”這兩個標準。

流利度。包括語法正確性和慣用語選擇兩個方面，結(jié)合虛擬式英漢機譯的考查點則指“時間定位”和“標志性結(jié)構(gòu)識別”。

忠實度。輸出譯文能否傳達與原文相同的意思？此項標準應(yīng)對虛擬式英漢機譯的考查點——“含義轉(zhuǎn)達”。

2.2 測評方法

作者采用的是人工評測方法，下面是作者設(shè)計的打分標準表（見表一、表二）。

3.測評結(jié)果及問題分析

3.1 測評結(jié)果

在由三位評價者獨立地對機譯譯文的19個句子打分后，計算出每個句子在相應(yīng)測評標準下的平均得分。而后把每個句子的各項平均得分加起來得到單項例句譯文質(zhì)量的相對總分（滿分為10分，見表三，按討論需要展示部分數(shù)據(jù)）。

根據(jù)以上圖表當(dāng)中的數(shù)值，作者將最后一列19個例句譯文質(zhì)量的相對總分加起來再除以例句的數(shù)目，得到一個平均數(shù)值——接受測評機器系統(tǒng)對虛擬式英漢翻譯處理能力的參考數(shù)值。經(jīng)計算，該數(shù)值為6.69，即百度在線翻譯軟件可以保證虛擬式英漢譯文的質(zhì)量維持在60%—70%之間，處理效果比較理想，基本實現(xiàn)譯文的通暢性和準確性。

3.2 測評結(jié)果分析

3.2.1 含義傳達

這里的“含義”指字面意義之上的“隱含義”。百度在線翻譯軟件是如何處理這一隱含義的呢？測評語料第5、17句，在譯文的準確度上都值得了0分。例如：

例句5：Long live the People’s Republic of China！

機譯譯文：長的中華人民共和國中生活。

正確譯文：中華人民共和國萬歲！

很顯然，機器沒有翻譯出“l(fā)ive”的隱含義——“生生不息”，而且也沒有識別出倒裝結(jié)構(gòu)，正常的語序是“The People's Republic of China live long ！” 所以只翻譯出“生活”的字面含義是不夠的，本句的隱含義是“祝愿中華人民共和國國運昌盛，薪火世代相傳”。

這廣為人知的句子肯定會收錄在機器的語料庫系統(tǒng)當(dāng)中，怎會出現(xiàn)這種低級錯誤？那么，在哪可以彌補這個錯誤呢？原來在百度在線翻譯操作界面的右下角有一排小字提醒用戶：新！為您提供類似表述。這樣就能彌補機器翻譯出錯的情況。

3.2.2 標志性結(jié)構(gòu)識別

這里所謂的“標志性結(jié)構(gòu)識別”是指像“if only”，“as if”和“ I wish” 這些慣用表達形式，從而把源語言轉(zhuǎn)換成目標語言相應(yīng)的結(jié)構(gòu)。但是機器是否快速準確地辨認出這些慣用表達形式呢？

作者發(fā)現(xiàn)在句子結(jié)構(gòu)較為簡單的情況下，機器能夠做到這一點，如表三當(dāng)中的第13句到第18句的譯文流利度的分數(shù)都在4分以上，這是因為這些例句的譯文在標志性結(jié)構(gòu)識別測評項目上得分接近滿分。例如：

例句18：But for your help，I couldn't have achieved anything.

機譯譯文：要不是你的幫助，我不可能取得任何東西。

在此例句中，機器很好地識別了“but for” 句式，準確翻譯為“要不是……”來表達否定對過去事實的假設(shè)含義。但是當(dāng)句子結(jié)構(gòu)稍微難上一點，機器翻譯就回到了字對字的翻譯起點。

3.2.3 時間定位

一般來說，機器翻譯在動詞的“時、體、態(tài)、式”這四個方面的處理上，“時”的處理是最理想的。因為英語的動詞本身有時態(tài)的變化，可以根據(jù)動詞的形位變化來判斷事件發(fā)生的時間。例如：

例句6：He spoke to me as if I were deaf. （動詞過去式，對過去事件的虛擬）

機譯譯文：他跟我說話時就好像我是聾子。

例句7：I wish it were spring all the year round. （表常態(tài)的時間狀語，對現(xiàn)在事件的虛擬）

機譯譯文：我希望這一年四季都是春天。

4.結(jié)束語

首先，從數(shù)據(jù)分析來看，百度在線翻譯軟件可以保證虛擬式英漢譯文的質(zhì)量維持在60%—70%之間，處理效果比較理想。其次，從翻譯標準來衡量，譯文的忠實度要比譯文的流利度處理得要好，可以基本保證假設(shè)含義的傳達，但是語法結(jié)構(gòu)的處理和識別能力就相對弱一些。

最后，從具體實例來看，在虛擬式三大語法考查點當(dāng)中，百度在線翻譯處理得最好的便是時間定位，基本反映出了說話人的情景。

參考文獻：

[1] http：//baike.baidu.com/view/608784.htm

[2] 章振邦，新編英語語法教程學(xué)生用書第五版，上海外語教育出版社，181—190

[3] Philipp Koehn ，統(tǒng)計機器翻譯譯本，電子工業(yè)出版社，147—148

[4] http：//nlp.ict.ac.cn/evalshow.php？id=2013