AIに大学院の講義で出している課題をやらせてみたら今後先生が頭を抱えそうな結果が出た

絶対これで卒論書くやつ出てくる
206
Masanori Kusunoki / 楠 正憲 @masanork

ChatGPTに大学院の講義で出している課題をやらせてみた。わたしの授業を聞いていないことは明らかで事実誤認も少なからずあるが、講義を聴いていない学生が提出した課題として読むと、まあもっともらしいことを書くとこんな感じになるわなーという水準に達していて、AIに書かせたと見抜くのは無理だな

2022-12-04 11:42:50
Masanori Kusunoki / 楠 正憲 @masanork

Q. コレ私が大学院の講義で出した課題で、学生がAIに回答させると困るんだけど、教員として学生が書いたのか、AIが書いたのか、どうやって見分けたらいいかな。ちゃんとした答えが返ってくる者だから、コレじゃ不可を付けることはできないと困っちゃった。

2022-12-04 11:46:29
Masanori Kusunoki / 楠 正憲 @masanork

A. 申し訳ありませんが、私は人工知能であるため、人間が書いたものと判断することはできません。 また、私は大量のデータから学習して生成された文章を出力することができますが、それが人間が書いたものかどうかの判断はできません。

2022-12-04 11:46:53
Masanori Kusunoki / 楠 正憲 @masanork

学生が作成した文章を判断する場合には、文章の内容や構成、表現などを検証し、それらが学生が作成したものであるかどうかを判断することが必要です。また、疑わしい文章が見つかった場合は、学生と直接話をするなどして、その文章が学生が作成したものであるかどうかを確認することができます。

2022-12-04 11:47:08
Masanori Kusunoki / 楠 正憲 @masanork

また、今後は、人工知能を使用した文章生成技術が進歩する可能性がありますが、そうした文章が人間が書いたものであるかどうかを判断するための方法も研究されているようです。

2022-12-04 11:47:28
Masanori Kusunoki / 楠 正憲 @masanork

とりあえずのAI対策としては今のところChatGPTはWebブラウズできないので、学習が追いつかない時事問題を入れる、これまで間違っていても分量があれば可をつけていたところ、事実誤認など講義を聞いてないと思しき答案に対しては不可をつけるのが対策になるのかな?

2022-12-04 12:22:24
イワケン@Microsoft MVP @iwaken71

AIが大学のレポートを答えちゃうかもしれない時代 twitter.com/masanork/statu…

2022-12-04 22:55:42
V @voluntas

これがシンギュラリティってやつかー。生きてるうちにここまでくるとは。 twitter.com/masanork/statu…

2022-12-04 16:11:57
靴磨きのDupekun @Dupekun

宿題が意味をなさなくなる時代が到来! twitter.com/masanork/statu…

2022-12-04 20:27:23
odashi @odashi_t

講義資料をデータで配っている場合、それをpromptに流し込んで出力を補強するというハックが使える気がしたので、宿題をちゃんとやったか確かめること自体が無意味にはなりそうですね。 twitter.com/masanork/statu…

2022-12-04 18:06:02
odashi @odashi_t

本来の目的に返って自学のために宿題を出し、提出は不要、でよい気がした。

2022-12-04 18:06:57
せんせい主義 @1000says

仮の答えをChatGPTにいくつか回答させて、それをサマった上で、講義レジュメとちょっとググった内容を補完したら、簡単に答え出そうだな。マイニング組めるならそこも自動化できそう。

2022-12-04 12:26:22
黎 Re:i @Rei00029992

今までもウィキペディアコピペとかあったし、卒論とかでの悪用は普通に横行しそう >RT

2022-12-04 12:38:47
こまくさ @exp_komakusa

絵描きより字書きの方が苦しくなったりするのかな

2022-12-04 20:45:44
idiotton @idiotton

AIが書いたのか判別するAIの登場が待たれる。 twitter.com/masanork/statu…

2022-12-04 19:38:00

どう対策すべきか

うっちー3@魔法少女 @kyoto_bitcoin

大学の試験もレポートはダメになりそうだなあ。 twitter.com/masanork/statu…

2022-12-04 16:32:46
Nobuhiko Kondo @nobuhiko_kondo

いやほんとそうなるよな。都度生成されるからいわゆる従来的なコピペにもならないし、ですますをだであるに変えるくらいのちょいアレンジでもうお手上げなはず。パフォーマンス評価において、「書かれたものを見る」だけではもうだめになってしまったな。

2022-12-04 16:05:39
@meamcarrier

@masanork しばらくはAIに劣る解答を不可とすることで対応出来るかもしれませんが、将来的にはAI並みに優れた解答を不可とすることになるかもしれませんね。

2022-12-04 14:39:33
あだむ@タマ🐾the Org@n Gr!nder. @adamat

機械学習使ってAIが出力した文書との類似度をとる、くらいしか方法はなさそうな気がする……けど「答え」もそれに近そうだしな……ううむ。

2022-12-04 15:52:39
さんまだんご @atnmtest

AI絵の「手が上手くかけてないからAI」と同じで 講義のレポートも「それっぽい文章には仕上がっているが部分的に誤っているからAI」判定したら"よくわかってない人間でした"はあり得る 泣いちゃう

2022-12-04 17:13:16