意想不到的合作伙伴利用ChatGPT 維護(hù)學(xué)術(shù)誠(chéng)信

文／阿諾·盧瓦（Arno Louw）

ChatGPT 及其文本生成人工智能在南非大學(xué)和世界各地引起了軒然大波。人們普遍認(rèn)為，學(xué)生可能會(huì)濫用人工智能來(lái)撰寫(xiě)書(shū)面作業(yè)，教師則難以驗(yàn)證作業(yè)的真實(shí)性。然而，作為協(xié)同評(píng)估者，ChatGPT 實(shí)際上可以進(jìn)一步確保學(xué)術(shù)誠(chéng)信。

ChatGPT 是OpenAI 研發(fā)的大型語(yǔ)言模型，使用深度學(xué)習(xí)算法來(lái)生成類(lèi)似人工的文本以回應(yīng)提示或問(wèn)題。雖然先進(jìn)的人工智能語(yǔ)言生成器對(duì)學(xué)術(shù)和專(zhuān)業(yè)寫(xiě)作很有用，但如果學(xué)生不小心或惡意地使用這些工具，可能引發(fā)學(xué)術(shù)誠(chéng)信問(wèn)題。令人擔(dān)憂的是，ChatGPT 可能會(huì)顛覆傳統(tǒng)的評(píng)估方法，因?yàn)樗梢陨筛哔|(zhì)量的書(shū)面作業(yè)，而這些作業(yè)很難被識(shí)別為是機(jī)器創(chuàng)作的，從而更難以確保學(xué)術(shù)誠(chéng)信。隨著預(yù)測(cè)文本和語(yǔ)言生成器復(fù)雜性的增加，教育機(jī)構(gòu)領(lǐng)導(dǎo)必須保持警惕，要采取策略以防止出現(xiàn)學(xué)術(shù)不端行為。那么，如何有效利用ChatGPT 來(lái)改進(jìn)學(xué)術(shù)評(píng)估呢？

生成式人工智能 日益增長(zhǎng)的力量和影響力

預(yù)測(cè)文本技術(shù)已廣泛應(yīng)用于各種設(shè)備和應(yīng)用程序，它利用機(jī)器學(xué)習(xí)來(lái)推薦常用的單詞和短語(yǔ)，以加快文本輸入的過(guò)程。OpenAI 最初是一家專(zhuān)注于強(qiáng)化學(xué)習(xí)研究和元學(xué)習(xí)機(jī)器人的非營(yíng)利組織，于2019 年發(fā)布了GPT-2，后于2020 年發(fā)布了GPT-3，并于2023 年3 月發(fā)布了GPT-4。這些語(yǔ)言模型展示了前所未有的自然語(yǔ)言處理能力。GPT-3 擁有超過(guò)1750 億個(gè)機(jī)器學(xué)習(xí)參數(shù)，可以生成各種格式的文本并執(zhí)行復(fù)雜的任務(wù)。

“有效利用ChatGPT，能夠進(jìn)一步改進(jìn)學(xué)術(shù)評(píng)估并維護(hù)學(xué)術(shù)誠(chéng)信”

盡管越來(lái)越先進(jìn)，但預(yù)測(cè)文本軟件仍然容易出錯(cuò)。模仿人腦結(jié)構(gòu)的神經(jīng)網(wǎng)絡(luò)是一種機(jī)器學(xué)習(xí)模型。GPT-3 使用的架構(gòu)通過(guò)注意力機(jī)制概括序列，從而避免了以前循環(huán)神經(jīng)網(wǎng)絡(luò)架構(gòu)的順序局限性。ChatGPT 采用深度學(xué)習(xí)算法生成與人工寫(xiě)作極為相似的文本，這樣的人工智能語(yǔ)言生成器為學(xué)術(shù)和專(zhuān)業(yè)寫(xiě)作帶來(lái)了潛在的好處。ChatGPT 是一種備受期待的寫(xiě)作和語(yǔ)言交流的工具，有可能徹底改變我們交流和學(xué)習(xí)的方式。

然而，人們擔(dān)心ChatGPT 可能會(huì)通過(guò)生成高質(zhì)量的文本挑戰(zhàn)傳統(tǒng)的評(píng)估方法，從而使學(xué)術(shù)工作的真實(shí)性受到質(zhì)疑。這種擔(dān)憂是基于這樣一種假設(shè)：學(xué)術(shù)評(píng)估在過(guò)去幾十年中保持不變，只強(qiáng)調(diào)寫(xiě)作風(fēng)格和學(xué)術(shù)趨勢(shì)，而忽視了經(jīng)過(guò)驗(yàn)證的研究和邏輯對(duì)支持論點(diǎn)的重要性。若是因此而忽視ChatGPT，就忽略了該技術(shù)在教育環(huán)境中的潛在優(yōu)勢(shì)和應(yīng)用。為了確保學(xué)術(shù)作品的真實(shí)性，一種有效策略是調(diào)查一篇學(xué)術(shù)文章是否與另一篇已知作者的文章有相同作者。在這種情況下，ChatGPT 可以成為一個(gè)有用的工具。

利用ChatGPT 進(jìn)行評(píng)估

當(dāng)被要求列出十種確定學(xué)術(shù)文本真實(shí)性的方法時(shí)，ChatGPT 提供了一系列方式，包括抄襲檢測(cè)、風(fēng)格分析、主題分析、時(shí)限分析、句法分析、詞匯分析、抄襲對(duì)比、語(yǔ)法分析、內(nèi)容分析和語(yǔ)義分析。此外，ChatGPT 提出了一套評(píng)估標(biāo)準(zhǔn)，包括論點(diǎn)清晰度、原創(chuàng)性和抄襲、語(yǔ)言熟練程度、凝聚力和連貫性以及是否符合學(xué)術(shù)規(guī)范等。每個(gè)標(biāo)準(zhǔn)都可以用1 到5 的等級(jí)來(lái)評(píng)估，通過(guò)計(jì)算總分，可以確定論文的整體質(zhì)量。

雖然ChatGPT 是幫助確定真實(shí)性的重要工具，但它應(yīng)該與其他評(píng)估方法相結(jié)合，以確保學(xué)術(shù)誠(chéng)信。教育工作者也是學(xué)術(shù)評(píng)估者，他們有責(zé)任維護(hù)學(xué)術(shù)誠(chéng)信。技術(shù)使學(xué)術(shù)評(píng)估更加高效和有效，但人類(lèi)智慧在確保評(píng)估的公平性和準(zhǔn)確性方面仍然至關(guān)重要。因此，評(píng)估者在評(píng)估學(xué)術(shù)工作的質(zhì)量和有效性時(shí)應(yīng)保持警惕。

相似性、語(yǔ)法和教學(xué)法

相似性檢查器是一種工具，用于將提交的文本與已知內(nèi)容進(jìn)行比較，以檢測(cè)抄襲情況。許多機(jī)構(gòu)已經(jīng)制定了包括相似性檢查在內(nèi)的政策和協(xié)議。然而，相似性報(bào)告不應(yīng)作為確定抄襲的唯一標(biāo)準(zhǔn)，因?yàn)樗鼈冇袝r(shí)會(huì)產(chǎn)生爭(zhēng)議。ChatGPT 也可以充當(dāng)相似性檢查器。作為一種語(yǔ)言模型，ChatGPT 能夠超越精確的文本匹配，發(fā)現(xiàn)內(nèi)容的相似性，從而有效識(shí)別潛在抄襲。它能夠?qū)ξ谋具M(jìn)行更深層次的分析和評(píng)估，這增強(qiáng)了其作為高效和準(zhǔn)確的相似性檢查器的能力，為教育機(jī)構(gòu)維護(hù)學(xué)術(shù)誠(chéng)信提供了有價(jià)值的見(jiàn)解。

語(yǔ)法檢查器是功能強(qiáng)大的寫(xiě)作助手，可以檢查文章的拼寫(xiě)、語(yǔ)法、標(biāo)點(diǎn)符號(hào)、風(fēng)格和語(yǔ)氣。它們可以幫助識(shí)別句子結(jié)構(gòu)和語(yǔ)法錯(cuò)誤，并提出修改建議，以提高文章的清晰度和可讀性。語(yǔ)法檢查器是校對(duì)和提高整體寫(xiě)作質(zhì)量的絕佳工具。作為一種可以對(duì)各種查詢生成類(lèi)似于人類(lèi)回復(fù)的語(yǔ)言模型，ChatGPT 能夠就各種主題（從基礎(chǔ)知識(shí)到復(fù)雜想法）提供見(jiàn)解。它可以幫助你進(jìn)行頭腦風(fēng)暴、研究和構(gòu)思。ChatGPT 還可以指導(dǎo)文章內(nèi)容，建議替代方法，并提供例子來(lái)幫助闡明觀點(diǎn)。在檢查學(xué)術(shù)論文時(shí)，ChatGPT 和語(yǔ)法檢查器都很有幫助，但它們的作用和優(yōu)勢(shì)各不相同。語(yǔ)法檢查器可以幫忙找出可能影響文章清晰度和連貫性的錯(cuò)誤。而ChatGPT 可以提供見(jiàn)解和建議，幫助你發(fā)展和完善論點(diǎn)。將ChatGPT 作為檢查抄襲和語(yǔ)法的額外工具進(jìn)行協(xié)同使用，可以助力學(xué)術(shù)評(píng)估。

將相似性和語(yǔ)法檢查器、ChatGPT 與人工評(píng)審員的能力結(jié)合使用，可以更徹底地審查文本的真實(shí)性。首先，ChatGPT 可以高效掃描大量文本，識(shí)別潛在相似之處，提供改進(jìn)寫(xiě)作風(fēng)格的建議，并標(biāo)出可能存在問(wèn)題的地方。其次，ChatGPT 具備深入分析語(yǔ)言的能力，能夠檢測(cè)意義和意圖的相似性，從而對(duì)文本進(jìn)行更細(xì)致的評(píng)估。此外，ChatGPT 可以提供關(guān)于寫(xiě)作質(zhì)量、語(yǔ)法和連貫性的寶貴反饋，從而加快整體評(píng)估過(guò)程。人工評(píng)審員則將其專(zhuān)業(yè)技能、知識(shí)和對(duì)主題的理解引入評(píng)估，他們能夠整合ChatGPT 和其他相似性檢查器提供的信息，解釋結(jié)果，并對(duì)學(xué)術(shù)工作的質(zhì)量和原創(chuàng)性做出明智的判斷。人工評(píng)審員可以識(shí)別逐字復(fù)制或近似轉(zhuǎn)述之外的抄襲情況，利用他們的批判性思維來(lái)檢測(cè)ChatGPT 可能遺漏的更微妙的抄襲形式。此外，他們還能評(píng)估作品所用資源的相關(guān)性和適當(dāng)性，以及文章的整體連貫性和凝聚力。

將人類(lèi)智慧與諸如ChatGPT 等人工智能相結(jié)合，可以對(duì)學(xué)術(shù)工作進(jìn)行更全面、更準(zhǔn)確的評(píng)估。雖然技術(shù)工具可以加快相似性檢查并提供有價(jià)值的見(jiàn)解，但人工評(píng)審員可以運(yùn)用批判性思維、專(zhuān)業(yè)知識(shí)和道德判斷，以確保評(píng)估公平透明，同時(shí)維護(hù)學(xué)術(shù)誠(chéng)信。在學(xué)術(shù)環(huán)境中，ChatGPT 和類(lèi)似的人工智能技術(shù)共同構(gòu)成了一種協(xié)作的實(shí)用方式，來(lái)維護(hù)學(xué)術(shù)誠(chéng)信。

可以通過(guò)創(chuàng)造性的教學(xué)法和互動(dòng)來(lái)充分利用ChatGPT 改進(jìn)評(píng)估流程。例如，從視頻生成的文本中提取文字并使用ChatGPT 設(shè)計(jì)實(shí)驗(yàn)，就是一種評(píng)估學(xué)生對(duì)學(xué)習(xí)內(nèi)容理解程度的實(shí)用策略。另一個(gè)例子是要求學(xué)生重新閱讀和修改他們的作業(yè)，添加引用注釋和參考文獻(xiàn)并明確指出論點(diǎn)的來(lái)源。這種機(jī)制可以從學(xué)習(xí)的第一年開(kāi)始引入，以確保學(xué)生了解正確的引用規(guī)范。此外，在書(shū)面作業(yè)中添加幻燈片摘要也可以加強(qiáng)理解和邏輯性。對(duì)于持續(xù)評(píng)估來(lái)說(shuō)，更好的做法是通過(guò)一系列作業(yè)完成最終作業(yè)，并提供明確的預(yù)期說(shuō)明。應(yīng)在處理學(xué)術(shù)不端行為和充分利用ChatGPT的功能這二者中尋求平衡。

通過(guò)評(píng)估提高寫(xiě)作水平

ChatGPT 還能發(fā)現(xiàn)寫(xiě)作中可以改進(jìn)的地方。傳統(tǒng)的相似性檢查器可能只專(zhuān)注于檢測(cè)文本相似度，但ChatGPT 可以分析寫(xiě)作的整體質(zhì)量，并就寫(xiě)作質(zhì)量、語(yǔ)法和連貫性提供反饋。它能對(duì)寫(xiě)作風(fēng)格、措辭和句子結(jié)構(gòu)提出改進(jìn)建議，有助于提高文章的清晰度，能極大幫助希望提高寫(xiě)作技能和學(xué)術(shù)成果質(zhì)量的學(xué)生。這對(duì)于寫(xiě)作母語(yǔ)非英語(yǔ)的學(xué)生和希望對(duì)學(xué)生的寫(xiě)作提供更全面反饋的教師來(lái)說(shuō)也尤為有用。

此外，ChatGPT 還能提供改進(jìn)文本清晰度和連貫性的建議，這對(duì)于要求高精度和清晰度的學(xué)術(shù)寫(xiě)作很有價(jià)值。它還可以分析文章的結(jié)構(gòu)和組織，幫助作者改進(jìn)思路和結(jié)構(gòu)。ChatGPT 生成類(lèi)人回復(fù)的能力還能促進(jìn)互動(dòng)式學(xué)習(xí)體驗(yàn)。學(xué)生可以把它視為寫(xiě)作伙伴，激發(fā)創(chuàng)造力并促進(jìn)原創(chuàng)性。ChatGPT 不僅可以標(biāo)記潛在的問(wèn)題，還可以充當(dāng)合著者，鼓勵(lì)學(xué)生在提交之前重新閱讀和完善自己的作品。

ChatGPT 可以在寫(xiě)作質(zhì)量、抄襲和真實(shí)性方面提供更詳盡和全面的反饋，從而徹底改變學(xué)術(shù)作品的評(píng)估方式。但值得注意的是，應(yīng)將ChatGPT 與道德準(zhǔn)則和問(wèn)責(zé)措施結(jié)合，以確保其得到負(fù)責(zé)任和公平的使用。

學(xué)術(shù)評(píng)估中的人為干預(yù)

盡管ChatGPT、相似性檢查器和語(yǔ)法檢查器等技術(shù)和工具不斷進(jìn)步，但在確保學(xué)術(shù)論文和作業(yè)評(píng)估的準(zhǔn)確性和公平性方面，人類(lèi)智慧仍然發(fā)揮著關(guān)鍵作用。技術(shù)工具在理解人類(lèi)感知語(yǔ)言的細(xì)微差別和復(fù)雜性方面存在局限性，而人工評(píng)審員能對(duì)這些工具提供的信息進(jìn)行語(yǔ)境分析和解讀，這對(duì)于對(duì)書(shū)面工作的質(zhì)量做出明智判斷至關(guān)重要。此外，要識(shí)別這些工具可能遺漏的剽竊情況，人類(lèi)智慧也是必要的。

用于檢驗(yàn)真實(shí)性的研究實(shí)驗(yàn)

我使用了兩種策略來(lái)驗(yàn)證ChatGPT 的評(píng)估真實(shí)性。第一種策略是要求ChatGPT將學(xué)生提交的書(shū)面作業(yè)與已知由該學(xué)生撰寫(xiě)的另一篇文章進(jìn)行比較。第二種策略則是要求ChatGPT 將學(xué)生提交的作業(yè)與已知由他人撰寫(xiě)的另一篇文章進(jìn)行比較。在每種情況下，ChatGPT 都會(huì)分析被審查文件的寫(xiě)作風(fēng)格，并就兩者由同一個(gè)人撰寫(xiě)的可能性提供反饋，同時(shí)提供支持分析的具體證據(jù)。

策略1

這個(gè)策略是詢問(wèn)ChatGPT 兩個(gè)文本是否為同一個(gè)作者所寫(xiě)。學(xué)生需要在完成正式作業(yè)之前提交一份書(shū)面作業(yè)。傳記文本就是此類(lèi)書(shū)面文本的一個(gè)例子。若發(fā)現(xiàn)后來(lái)提交的作業(yè)有可疑之處，教師可以使用ChatGPT將作業(yè)文本與傳記文本進(jìn)行比較。當(dāng)我進(jìn)行這個(gè)實(shí)驗(yàn)時(shí)，ChatGPT 給出了以下回答：

這兩段很可能是同一個(gè)人寫(xiě)的。這兩段討論了同一個(gè)機(jī)構(gòu)——約翰內(nèi)斯堡大學(xué)（UJ），并涉及教育和技術(shù)。此外，第一段提到了作者在約翰內(nèi)斯堡大學(xué)學(xué)術(shù)技術(shù)中心（CAT）的工作，而第二段描述了信息和通信技術(shù)（ICTs）對(duì)約翰內(nèi)斯堡大學(xué)評(píng)估工作的影響。另外，第一段還提到了作者的名字【作者】，并介紹了他在CAT 擔(dān)任教學(xué)和電子學(xué)習(xí)高級(jí)專(zhuān)家的情況。這些細(xì)節(jié)表明，這兩段的作者很可能是同一個(gè)人。

為了進(jìn)一步測(cè)試，我提交了第三個(gè)文本，并讓ChatGPT 將其與另外兩篇文章進(jìn)行比較。

ChatGPT 的回答如下：

這有可能是【作者】寫(xiě)的。它討論了約翰內(nèi)斯堡大學(xué)如何利用信息和通信技術(shù)來(lái)提升學(xué)生的參與度，這與【作者】在約翰內(nèi)斯堡大學(xué)學(xué)術(shù)技術(shù)中心擔(dān)任教學(xué)顧問(wèn)（教學(xué)設(shè)計(jì)）的專(zhuān)業(yè)領(lǐng)域相關(guān)。本段還使用了與前幾段類(lèi)似的術(shù)語(yǔ)，如“信息和通信技術(shù)”和“在線調(diào)查”。然而，如果沒(méi)有進(jìn)一步的信息，就無(wú)法確定【作者】是該段落的作者。

策略2

在第二個(gè)實(shí)驗(yàn)中，我在網(wǎng)上搜索了關(guān)于學(xué)生作業(yè)中某個(gè)特定主題的文章，選擇了一些由可信作者撰寫(xiě)的文本，并復(fù)制粘貼到ChatGPT 中。然后，我又粘貼了一名學(xué)生就該主題創(chuàng)作的文章，并讓ChatGPT比較兩篇文章的寫(xiě)作風(fēng)格。同樣，評(píng)審員也可以將學(xué)生的寫(xiě)作與其他學(xué)生的寫(xiě)作進(jìn)行比較，以發(fā)現(xiàn)可疑的相似之處。

結(jié)果如下：

這兩段不太可能是同一作者所寫(xiě)。第一段討論了學(xué)生需要完成的具體練習(xí)，以比較他們的寫(xiě)作風(fēng)格，這與教學(xué)設(shè)計(jì)和學(xué)習(xí)有關(guān)，而第二段討論了信息和通信技術(shù)對(duì)學(xué)生的好處，這與教育和技術(shù)有關(guān)。此外，第一段使用了與電子投稿有關(guān)的技術(shù)語(yǔ)言和術(shù)語(yǔ)，而第二段使用了更籠統(tǒng)的語(yǔ)言，沒(méi)有提到任何具體的技術(shù)或方法。這些差異表明，這些段落是由不同的作者撰寫(xiě)的，他們擁有不同的專(zhuān)業(yè)領(lǐng)域和寫(xiě)作風(fēng)格。

作為人工智能語(yǔ)言模型，在沒(méi)有進(jìn)一步信息的情況下，我無(wú)法確認(rèn)文本的作者身份。根據(jù)該段的內(nèi)容以及它討論的話題與【作者】的專(zhuān)業(yè)領(lǐng)域相關(guān)，他或她有可能是該段作者。然而，要確定文章的真正作者，還需要進(jìn)一步的調(diào)查。

這些實(shí)驗(yàn)結(jié)果都表明了ChatGPT 可以得出可接受的結(jié)論和比較結(jié)果，有助于在評(píng)估過(guò)程中協(xié)助驗(yàn)證并確保學(xué)術(shù)文件的誠(chéng)信。因此，最后一個(gè)關(guān)于真實(shí)性的問(wèn)題應(yīng)該是是否需要人工評(píng)審員。

結(jié)論

ChatGPT 可以成為促進(jìn)原創(chuàng)性和提高學(xué)術(shù)寫(xiě)作整體質(zhì)量的重要工具。但是，只有道德和公正地使用它，才能更好地確保學(xué)術(shù)評(píng)估的誠(chéng)信。學(xué)術(shù)機(jī)構(gòu)在接受ChatGPT 的同時(shí)也要采取措施降低其相關(guān)風(fēng)險(xiǎn)。建議采用評(píng)估策略以提高抄襲檢測(cè)的準(zhǔn)確性，例如添加參考文獻(xiàn)，并對(duì)寫(xiě)作質(zhì)量進(jìn)行更全面的分析。通過(guò)使用ChatGPT作為合著者，學(xué)生可以從中受益，從而提高其學(xué)術(shù)書(shū)面作品的完整性和真實(shí)性。

然而，值得注意的是，人類(lèi)智慧在識(shí)別相似性檢查器可能遺漏的抄襲情況中仍然發(fā)揮著至關(guān)重要的作用。人工評(píng)審員可以利用他們?cè)谠u(píng)估主題方面的知識(shí)和專(zhuān)業(yè)技能來(lái)檢測(cè)涉及文本改寫(xiě)或使用同義詞的抄襲情況。此外，雖然語(yǔ)法檢查器可以識(shí)別錯(cuò)誤并提出修改建議，但最終判斷應(yīng)由人工評(píng)審員根據(jù)文本的上下文和預(yù)期含義來(lái)做出。

雖然ChatGPT 和其他人工智能技術(shù)有助于評(píng)估和提高學(xué)術(shù)寫(xiě)作，但它們應(yīng)該作為輔助寫(xiě)作工具與人類(lèi)智慧一同使用，如此可確保評(píng)估過(guò)程公平和透明。學(xué)生和學(xué)術(shù)機(jī)構(gòu)有責(zé)任維護(hù)和促進(jìn)學(xué)術(shù)誠(chéng)信。通過(guò)道德和公正地使用ChatGPT，學(xué)術(shù)機(jī)構(gòu)可以提高學(xué)術(shù)寫(xiě)作的質(zhì)量，確保學(xué)術(shù)誠(chéng)信。