假如讓AI來批改英語(yǔ)作文……
圖片來源@視覺中國(guó)
在英語(yǔ)學(xué)習(xí)“聽說讀寫”四個(gè)環(huán)節(jié)中,中國(guó)學(xué)習(xí)者往往擅長(zhǎng)“聽”和“讀”, “說”和“寫”卻是典型的薄弱環(huán)節(jié)。
對(duì)于提升“說”的能力,我們有很多選擇,無論是口語(yǔ)學(xué)習(xí)的APP,還是真人授課服務(wù),供給端競(jìng)爭(zhēng)非常激烈。
但對(duì)于寫作的環(huán)節(jié),我們卻很少有機(jī)會(huì)得到訓(xùn)練。書面交流不僅更要比口語(yǔ)更遵守語(yǔ)法規(guī)則,還對(duì)一個(gè)人的詞句篇章、構(gòu)思邏輯等有更高的要求。同時(shí),寫作環(huán)節(jié)的反饋,會(huì)耗費(fèi)更多的精力和時(shí)間。
為了解決英語(yǔ)學(xué)習(xí)者在寫作上的難點(diǎn)和痛點(diǎn),近期,網(wǎng)易有道詞典上線了以人工智能驅(qū)動(dòng)的批改英文作文的功能——AI作文批改。據(jù)說,這位“AI老師”的專業(yè)程度,堪比四六級(jí)和高考閱卷老師。
有道 AI 作文批改功能體驗(yàn)
打開網(wǎng)易有道詞典APP,“作文批改”功能已經(jīng)在首頁(yè)顯示,一目了然。點(diǎn)擊之后,我們可以選擇可以批改的類型,范圍從K12到大學(xué)四六級(jí),以及托福雅思等出國(guó)考試,非常全面。
有道AI作文批改上,有拍照批改模式和手動(dòng)輸入模式兩種。鑒于目前大多數(shù)考試寫作的場(chǎng)景是基于手寫,我們選擇了主打手寫識(shí)別的拍照模式。
為了更沉浸式地感受AI老師,首先,我假裝自己是一名高三學(xué)生,寫(抄)了一篇150詞左右詞匯的英文作文。作文的大意是,李明向好友詹姆斯(James)寫了一封信,解釋為什么不能陪他在暑期休假以及相關(guān)事情。
AI系統(tǒng)將圖片識(shí)別之后,首先會(huì)提示你,點(diǎn)擊屏幕可以編輯作文,還會(huì)告知你提交前可以再檢查一遍。此處估計(jì)是擔(dān)心人工智能對(duì)于手寫體識(shí)別可能會(huì)出現(xiàn)的失誤。
這一提醒環(huán)節(jié)設(shè)置十分必要。鈦媒體在體驗(yàn)過程中發(fā)現(xiàn),即便是識(shí)別的準(zhǔn)確率非常高,但也會(huì)有個(gè)別單詞,因?yàn)樽舟E潦草而出現(xiàn)失誤。
確認(rèn)提交之后,有道AI作文批改給這篇小作文打了17分(總分25分),并且,細(xì)化到詞匯、結(jié)構(gòu)、語(yǔ)法和內(nèi)容方面均有評(píng)級(jí)。
更為重要的是,在點(diǎn)擊每一處標(biāo)紅的地方,有道AI老師都詳細(xì)地指出了錯(cuò)誤及其原因,還給出建議修正的意見。
為了讓作者的寫作水平更進(jìn)一步,有道AI老師對(duì)這篇作文給出了如下嚴(yán)厲不失細(xì)致的評(píng)語(yǔ);
“文章字?jǐn)?shù)疑似超出該考試字?jǐn)?shù)要求;在高中級(jí)別下,有一定詞匯積累,能使用少量高級(jí)詞匯,但還需更多積累;文章語(yǔ)句生硬,需加強(qiáng)上下文聯(lián)系;單詞拼寫基本正確,詞匯基礎(chǔ)扎實(shí);存在較多語(yǔ)法錯(cuò)誤。”
總的來說,有道的AI作文批改功能,針對(duì)不同學(xué)段和不同類別的考試水平進(jìn)行相對(duì)專業(yè)的打分,并從詞、句、篇章進(jìn)行點(diǎn)評(píng)和推薦,生成詳細(xì)的報(bào)告。在語(yǔ)法糾正方面,也給出了清晰的解析,直擊中國(guó)考試的痛點(diǎn),非常適合備考的學(xué)員在日常的練習(xí)。
有道 AI 作文批改 VS 微軟愛寫作
除了有道之外,目前市面上由人工智能驅(qū)動(dòng)的英文改寫的產(chǎn)品,還有巨頭微軟旗下的微軟愛寫作(微軟小英),和估值已經(jīng)超過10億美元的英文在線寫作工具“Grammarly”。
不過,很遺憾的是,目前Grammarly 沒有上線拍照識(shí)別手寫的功能,因而,為了相對(duì)客觀的對(duì)比,我們先體驗(yàn)了微軟愛寫作的產(chǎn)品。
鈦媒體發(fā)現(xiàn),微軟愛寫作目前主要是網(wǎng)頁(yè)版,還沒有上線中國(guó)區(qū)的App Store的相關(guān)APP。不過,它已經(jīng)嵌入了“微軟小英”的公眾號(hào)內(nèi)。該公眾號(hào)是微軟亞洲研究院打造的一款免費(fèi)的英語(yǔ)學(xué)習(xí)公眾號(hào),主打AI與英語(yǔ)學(xué)習(xí)相結(jié)合的體驗(yàn)。
在公眾號(hào)內(nèi),選擇“搶先體驗(yàn)”—“發(fā)現(xiàn)工具”—“作文打分”,入口相對(duì)隱蔽。并且,公眾號(hào)在提示用戶,更推薦大家使用web端,沒有切合當(dāng)前移動(dòng)互聯(lián)網(wǎng)的大趨勢(shì)。
同樣還是上述手抄作文,微軟愛寫作識(shí)別了之后,給出了23分(不過總分是多少不清楚),以及從詞匯句式、文章流暢性、文章內(nèi)容和拼寫語(yǔ)法四個(gè)角度給出了評(píng)價(jià)。
微軟的系統(tǒng)對(duì)這篇作文評(píng)價(jià)還不錯(cuò)。與有道AI老師比起來,微軟小英AI老師要溫和得多了,立馬讓人撿起來了剛被擊退的英文寫作的信心。
不過仔細(xì)一想,這更像是基于模板的“統(tǒng)一回復(fù)”,因?yàn)槲④洂蹖懽鞑]有指出具體的語(yǔ)法和句法的錯(cuò)誤,也沒有給出今后如何提高的針對(duì)性意見。
有道 AI 作文批改 VS Grammarly
體驗(yàn)完微軟愛寫作,再看看改寫工具Grammarly,畢竟這是一款日活已經(jīng)超過2000萬用戶的產(chǎn)品。雖然它不能手寫識(shí)別,但我們可以從挑選單句,進(jìn)行語(yǔ)法錯(cuò)誤糾正方面的對(duì)比。
例句1: Like students sing English song.
有道詞典
有道詞典:疑似動(dòng)詞時(shí)態(tài)錯(cuò)誤,建議將“sing”修正為“singing”;疑似名詞單復(fù)數(shù)錯(cuò)誤,建議將“song”修正為“songs”.
Grammarly
Grammarly(免費(fèi)版):名詞單復(fù)數(shù)錯(cuò)誤,建議將“song”改為“songs”.
例句2:When the girl will leave, she fount an old begger in the tree and looked at angry and cold.
有道詞典
有道詞典:疑似用詞不當(dāng),建議將“will leave”修正為“l(fā)eft”;疑似動(dòng)詞時(shí)態(tài)錯(cuò)誤,建議將“fount”修正為“found”;疑似名詞誤用,建議將“begger”修正為“beggar”等.
Grammarly
Grammarly(免費(fèi)版):建議將“begger”更改為“beggar”.
對(duì)比小結(jié):我們發(fā)現(xiàn),有道詞典更能識(shí)別出較復(fù)雜的語(yǔ)法錯(cuò)誤,如時(shí)態(tài)錯(cuò)誤(過去式居多),動(dòng)詞原形與動(dòng)名詞誤用。Grammarly偏向簡(jiǎn)單的語(yǔ)法修改,如介詞誤用,名詞單復(fù)數(shù)錯(cuò)誤等。
例句 3: Nest Tuesday, our class is going to a music camp.
有道詞典
有道詞典:疑似拼寫錯(cuò)誤,建議將“Nest”修正為“Next”.
Grammarly
Grammarly(免費(fèi)版):無錯(cuò)誤。
對(duì)比小結(jié):有道詞典更能識(shí)別不符合原文語(yǔ)境的單詞誤用。
總結(jié):
經(jīng)過對(duì)比體驗(yàn),我們發(fā)現(xiàn),三款產(chǎn)品各有優(yōu)劣。不過,綜合來看,有道AI作文批改,用起來更熟悉且順手——因?yàn)榭瓷先ニ斫庵袊?guó)學(xué)生的學(xué)習(xí)習(xí)慣、痛點(diǎn)與難點(diǎn)。
有道AI老師是如何做到的?這背后的核心邏輯又是什么?
從網(wǎng)易有道詞典那里,鈦媒體了解到,網(wǎng)易有道詞典AI作文批改功能主要由三個(gè)核心模塊構(gòu)成:評(píng)分模塊、評(píng)語(yǔ)模塊和糾錯(cuò)模塊。
有道AI作文批改評(píng)分模塊框架
其中,評(píng)分的模型框架結(jié)合了傳統(tǒng)的方法和深度學(xué)習(xí)的方法,以詞、句、篇章作為核心的評(píng)分維度;評(píng)語(yǔ)模塊提供全文評(píng)語(yǔ)、詞匯推薦、范文推薦;糾錯(cuò)模塊提供14個(gè)類別的語(yǔ)法錯(cuò)誤識(shí)別及修正,包括淺層的拼寫錯(cuò)誤、深層的語(yǔ)法錯(cuò)誤等。
同時(shí),我們得到了一份測(cè)試報(bào)告顯示,與國(guó)際上較為知名的兩個(gè)引擎相比,在作文批改引擎方向,網(wǎng)易有道詞典的算法性能更好。
評(píng)測(cè)時(shí)間 2020-03-31; P值-Precision 精確率, R值-Recall 召回率, F0.5-P值與R值的調(diào)和平均,其值越高,通常表示算法性能越好。
以上表格的測(cè)試集來源于用戶日志,具體來自三個(gè)方向,一是他們海外詞典批改服務(wù)的用戶請(qǐng)求日志,二是考研用戶的請(qǐng)求日志,三是來自有道智云的行業(yè)數(shù)據(jù)集。有道團(tuán)隊(duì)將這三個(gè)數(shù)據(jù)集中各抽出一部分來做測(cè)試集,抽選規(guī)則隨機(jī)。
經(jīng)過如上體驗(yàn)和對(duì)比,尤其是從一些細(xì)節(jié)方面,可以看出來,有道AI作文批改的研發(fā)團(tuán)隊(duì),是在了解了中國(guó)學(xué)生的難點(diǎn)和痛點(diǎn)之后,再進(jìn)行了針對(duì)性和差異化的開發(fā)。
這在當(dāng)前優(yōu)質(zhì)老師資源分布不均,且十分有限的情況下,有道AI作文批改老師的出現(xiàn),無疑為大多數(shù)英語(yǔ)學(xué)習(xí)者,提供了一位免費(fèi)的專屬私人教師。
更為重要的是,與真人老師比起來,有道AI作文批改老師在識(shí)別后,可以隨時(shí)隨地,在第一時(shí)間給出作業(yè)反饋,以及后續(xù)學(xué)習(xí)、提高的建議,更細(xì)致且高效,這不僅可以幫助學(xué)生在備考之際給出“臨門一腳”的指導(dǎo),還能在日常反復(fù)訓(xùn)練中起到重要的作用。(本文首發(fā)鈦媒體App,作者|李程程)
掃描二維碼推送至手機(jī)訪問。
版權(quán)聲明:本文由財(cái)神資訊-領(lǐng)先的體育資訊互動(dòng)媒體轉(zhuǎn)載發(fā)布,如需刪除請(qǐng)聯(lián)系。