[[FrontPage]] 投野研究室では話題の ChatGPT を言語教育分野の研究・実践でどう使うべきかを真剣に検討を始めます。 *ChatGPT を研究にどう使うか [#pedc486b] **日本語混じりの英語を添削させる [#u84120a7] -JEFLL A1レベルの以下の作文を入れてみる <s> I eat breakfast every day </s> <s> Today I ate bread and milk. </s> <s> I like bread and milk but I don't eat in breakfast rise and misosoup . </s> <s> I eat asagohan every day. </s> <s> I asagohan bread and mugicha . </s> <s> I don't eat asagohan gohan . </s> <s> My mother is tamani not eat. </s> <s> I itsumo taberu breakfast no menyuu is bread and mugicha . </s> <s> I like piza, rice, kurakkaa and gureepu furuutsu juusu but I don't like nattou , chiizu and hanbaagaa . </s> <s> saikin , mother ga cook ryouri wo yoku taberu . </s> <s> mother is cook very well. </s> <s> I eat the breakfast bread and milk. </s> <s> I breakfast amari eat. </s> <s> milk ha tokidoki drink. </s> <s> saikin ha , mother make ume juusu wo drink. </s> <s> very oishii . </s> <s> brakfast ha , itsumo taberu . </s> <s> I eat omisoshiru and raisu or bread, everyday. </s> <s> I don't like milk. </s><s> But, I like orang juusu . </s> <s> I have brekfast every morning. </s> <s> I usually have rice and osakana sooseiji . </s> <s> I like it --多くの日本語がローマ字で混在しており、通常の機械翻訳では対応できないはず。ところが・・・ -これを入れた結果が以下だ: There seem to be several grammatical errors in this text. Here's a corrected version: "I eat breakfast every day. Today I had bread and milk. I like bread and milk, but I don't eat rice and miso soup for breakfast. I have bread and mugicha for breakfast every day. I don't eat rice for breakfast, but my mother sometimes does. The menu for my breakfast is always bread and mugicha. I like pizza, rice, croquettes, and grapefruit juice, but I don't like natto, cheese, or hamburgers. Lately, my mother has been cooking meals that I enjoy. She cooks very well. For breakfast, I eat bread and milk, but I don't eat much. I sometimes drink milk. Lately, my mother has been making plum juice, which is very delicious. I always have breakfast. I usually have miso soup and rice or bread every day. I don't like milk, but I like orange juice. I have breakfast every morning. I usually have rice and grilled fish for breakfast, and I like it." Note: I corrected some spelling errors and changed the order of some words to make the sentences more natural. --特に I don't eat asagohan gohan . My mother is tamani not eat. を "I don't eat rice for breakfast, but my mother sometimes does." と直している。。。完璧に意味がわかっている風な修正である。。。 **さらにこれをCEFRレベルを意識して書き換えさせる [#e496aad0] -Prompt: Can you rewrite the same contents to suit the CEFR B1 level writings? -Response: --これが先ほどの文を対話的に覚えていてB1レベル(とChatGPTが判断した英文)に変更したもの Sure, here's a rewritten version of the text at a B1 level: I have breakfast every day, usually consisting of bread and a drink like milk or mugicha. Today I had bread and milk, which I enjoy, but I prefer not to eat rice and miso soup for breakfast. Although my mother sometimes does eat rice for breakfast, I usually stick to my regular menu of bread and a drink. I enjoy eating pizza, rice, croquettes, and grapefruit juice, but I don't like natto, cheese, or hamburgers. Recently, my mother has been cooking meals that I really like, and I think she is a great cook. For breakfast, I tend to eat a small amount of food and I sometimes drink milk. She's been making plum juice lately, which is very tasty. I never skip breakfast, and usually, I have miso soup and rice or bread. I don't like milk very much, but I do like orange juice. In the morning, I usually have rice and grilled fish, and I find it delicious. --語彙レベル、文の長さ、使う文法の複雑さなどが顕著に上がっている。それも内容的にはもとの内容をほぼキープし、ネイティブの書き換えとほぼ遜色がない。。。これは。。。ヤバいことになってきた。。。 --しかし、考えようによっては、今まで作れなかったデータを AI で大量に作れる可能性があり、根本的に研究方法を見直すことができそう。 --現状、CEFR の Aレベル内の詳細判定はあまり ChatGPTはできていない。このへんをチューニングすることができれば極めて有用な道具になる。 --使いこなす人間の専門知識が問われることになる。アウトプットを評価する分野ごとの手法が確立されないとすべて機械任せになる。 --それにしても、人間の言語習得とほぼ同じかそれ以上を機械が実現するということは、脳内の習得メカニズムも深層学習・トランスフォーマーで説明できるということか...