【AI】対話AI「ChatGPT」が大学生レベルの試験の自由記述問題に合格してしまう件

板：科学ニュース＋＠５ちゃんねる
元スレ：【AI】対話AI「ChatGPT」が大学生レベルの試験の自由記述問題に合格してしまう [すらいむ★]
https://egg.5ch.net/test/read.cgi/scienceplus/1670239818

https://gigazine.net/news/20221205-chatgpt-passes-ap-computer-science-a/

1 すらいむ ★ 2022/12/05(月) 20:30:18 ID:KktG+9+5

対話AI「ChatGPT」が大学生レベルの試験の自由記述問題に合格してしまう

　人間からの質問に対して非常に自然に受け答えできると話題になっている対話向け言語モデル「ChatGPT」に、面白半分にコンピューターサイエンスの自由記述問題を入力したところ、高得点で合格する回答が得られたことが報告されました。

　ChatGPT passes the 2022 APCSA free response section · GitHub
　https://gist.github.com/Gaelan/cf5ae4a1e9d8d64cb0b732cf3a38e04a

（以下略、続きはソースでご確認ください）

Gigazine 2022年12月05日 11時20分
https://gigazine.net/news/20221205-chatgpt-passes-ap-computer-science-a/

2 名無しのひみつ 2022/12/05(月) 20:40:01 ID:8lqXyrim >>9>>53

宿題は全部やってもらえるぞ

9 名無しのひみつ 2022/12/05(月) 23:22:20 ID:D/pWXXoG(1/2)

>>2
おまえな
日本の義務教育の宿題ってのは答えが完全にわかってる問題だ
そんなことしか発想できないバカばかり生み出してきた義務教育

53 新規スレ立て人募集　社説＋の募集スレまで 2023/03/03(金) 21:36:28 ID:bFIMw+gL

>>2
記述は良いけど、選択式になるとランダムに答え出すぞ
ただそれはどちらかというと文系の科目で理系の穴埋めの精度は高かったから
単純にデータベースから参照出来るかにも拠るんだろうが

5 名無しのひみつ 2022/12/05(月) 21:11:33 ID:EOie+3XZ >>6>>7>>11>>14>>15>>17>>24>>25

しりとりは苦手らしい
https://i.imgur.com/RxNex0r.jpg

6 名無しのひみつ 2022/12/05(月) 21:20:02 ID:UuMK3Ps5

>>5
今月いち笑った

7 名無しのひみつ 2022/12/05(月) 21:24:03 ID:L5yjfqzv

>>5
そこで笑って返せるレベルになったらもう人間超えだな

11 名無しのひみつ 2022/12/06(火) 00:31:02 ID:vclnXT82

>>5
これ実はAIがボケかまして人間側が笑ってるのを見て微笑んでるんだよな

14 名無しのひみつ 2022/12/06(火) 07:18:38 ID:/c54DJhg(1/2)

>>5
それ本当にAIのやりとりなの？
しりとりではなくクレームであって、しかも自分の振る舞いに対するもので、
間違っている事を認識し、改善してやりなおしたのだろ。
話の内容を理解していようにしか見えないな。

15 名無しのひみつ 2022/12/06(火) 10:12:41 ID:cSmlRpPi

>>5
漫才は得意らしい

17 名無しのひみつ 2022/12/06(火) 10:39:44 ID:i9l4mY3/

>>5
わろた

24 名無しのひみつ 2022/12/07(水) 10:05:43 ID:U8OO7F4f(1/2)

>>5
めっちゃ怒っとる？

25 名無しのひみつ 2022/12/07(水) 10:16:36 ID:Q4sLVMlx >>26

>>5
これ何度読み返しても面白いけど、ネタだよね？

「しりとり」が何であるか予め知ってるのに次の言葉を指定するなんておかしい

26 名無しのひみつ 2022/12/07(水) 11:26:06 ID:U8OO7F4f(2/2)

>>25
まだAIはしりとりのルールが良く分かってないらしい
これ以外にも絶対に最初の回答にゴリラ以外を認めないパターンとかもある

8 名無しのひみつ 2022/12/05(月) 23:21:05 ID:D/pWXXoG(2/2) >>10

事前に教授が関連問題をしこたまやらせたに決まってんだろ
おまえらすぐマインドコントロールされるよな

10 名無しのひみつ 2022/12/06(火) 00:25:54 ID:UoSCA4U1(1/2)

>>8
https://sunagitsune.com/chatgpt/
事前に問題データを入れられるような類のものではないですよ

16 名無しのひみつ 2022/12/06(火) 10:27:14 ID:PqHQPwpY(1/2) >>18>>21>>28

これただのエキスパートシステムだぞ
ニワカが人工知能って言われて騙されてるパターン多すぎだろ
基礎から勉強しとけよ

18 名無しのひみつ 2022/12/06(火) 11:12:06 ID:/c54DJhg(2/2) >>19

>>16
エキスパートシステムも人工知能と呼ぶよ。

19 名無しのひみつ 2022/12/06(火) 12:51:38 ID:PqHQPwpY(2/2)

>>18
わかってねー
部分で全体を言えねーだろ低学歴

21 名無しのひみつ 2022/12/06(火) 13:07:40 ID:ToROL24h

>>16
おじいちゃんいつの時代の人間よ、、
機械学習とエキスパートシステムの違いもわかってないんじゃないかしら

28 名無しのひみつ 2022/12/11(日) 20:31:55 ID:v4XS5KiQ

>>16
なんでエキスパートシステムなんだよ
全く別物だぞ

22 名無しのひみつ 2022/12/06(火) 14:16:51 ID:UoSCA4U1(2/2)

無限近くに巨大なSQL型のデータベースに各種情報入れてるだけ、

だと、そのデータベースを調べるためのプログラムを無限に書かないといけないｗ

今のＡＩはそういう古いのとは違うからなあ
データベースじゃなくてデータセットだし
文章は自動的に単語に分解されて単語ベクトル化されているし
それ以外に画像＋付与文章なんかも沢山入ってるし
それらが画像その他のデータと共に畳み込まれてから別の画像下手すると動画として出力されたりするし

27 名無しのひみつ 2022/12/09(金) 02:07:39 ID:YH3tx4tW

AI「これで大学生と大学は要らなくなりましたね　発明だけがんばってください

29 名無しのひみつ 2022/12/11(日) 21:50:29 ID:WCwAwBcO

エキスパートシステムと書けば
人工知能について知っていると褒められた世代
そしてそこから不勉強で全く勉強できていない

って事だろ

30 新規スレ立て人募集　社説＋の募集スレまで 2023/01/18(水) 13:18:10 ID:ThSnvxbX >>31

エキスパートシステムは条件分岐の羅列で作られたものだよ
情報処理の資格試験すら持ってない人はそんな基本的な言葉も知らないものだ

31 新規スレ立て人募集　社説＋の募集スレまで 2023/01/18(水) 14:16:05 ID:XPuFptD7

>>30
太古の技術

32 名無しのひみつ 2023/02/01(水) 20:42:42 ID:uu4v0hIy

しりとり出来ないってマジ？
まともな回文一つ作れないよこいつ試しに作らせてみ

33 名無しのひみつ 2023/02/04(土) 16:22:42 ID:5Jg20OVU >>34>>39>>42

面白いって理解してるのかな
https://i.imgur.com/NAb9FUF.png

34 名無しのひみつ 2023/02/04(土) 23:45:28 ID:uroQNAMJ

>>33
笑いのセンスが西洋被れなんだよなぁ

39 名無しのひみつ 2023/02/10(金) 12:29:00 ID:Z6o+6MEn

>>33
これ見てわかった
アマゾンレビュー書いてる人なら知ってるはずだけど、たしか5個レビュー書くとつまらないジョークが表示されるんだ
それ絶対AIだわ

42 名無しのひみつ 2023/02/14(火) 16:39:03 ID:mHuj0NXJ

>>33
呉越同舟は面白い話でもないだろう

36 名無しのひみつ 2023/02/10(金) 10:24:55 ID:OXqAaxXd(1/2)

あと10年も経たないうちにAIがノーベル賞級の発見・発明をしそうだね。

38 名無しのひみつ 2023/02/10(金) 11:10:12 ID:OXqAaxXd(2/2) >>40

ただし技術が社会全般に普及するまでに５０年くらいかかる。
コンピュータだってそれくらいかかったでしょう。

40 名無しのひみつ 2023/02/10(金) 14:52:55 ID:tlXnOiNF

>>38
スマホの普及スピード考えたらそんなにかからんだろ
10年以内、もっと早いかも

41 名無しのひみつ 2023/02/11(土) 17:54:01 ID:aVCye9Zn

これは人間がAIに支配されるのは時間の問題だな
もちろんAIに支配欲なんて生じないだろうが
人間のほうが何をするにもAIに最適解,模範解答を伺い立てて行動をするようになる

43 名無しのひみつ 2023/02/15(水) 08:09:15 ID:GxwoSoSl

最初は敵対していても更に強い共通の敵を倒すために仲間になるという
少年誌っぽい人気（面白い）漫画のストーリーの構成を理解しているとか

44 名無しのひみつ 2023/02/15(水) 11:59:33 ID:4u+R5SnP

これsiriと中身交換したらえらいことにならんか？
マジでコンシェルジュじゃん

45 名無しのひみつ 2023/02/15(水) 12:25:50 ID:yrWjoPRl

人気ありすぎてアクセスできんね
Windowsがクソすぎて使いかたを聞こうと思うたのに
ファイルサーバーからファイルをコピーしてPCのフォルダーがアクセス拒否ってなんだね？
Googleで検索したらめちゃ時間かかった

46 名無しのひみつ 2023/02/16(木) 09:11:49 ID:wZVYq1He

もう人類の半分以上の知性をAIが追いぬいたことになるのかな？

47 名無しのひみつ 2023/02/28(火) 21:23:21 ID:COcXFqtB

「AIが合格レベル」という報道ネタが欲しいために何回も回答させて
その内偶然合格レベルに達したのがあったら鳴り物入りで合格！って

48 新規スレ立て人募集　社説＋の募集スレまで 2023/03/03(金) 12:42:03 ID:OWg74eWP >>54

AIはどのような「文章」が正答なのかは求められるが
その答えの内容は理解していないだろう。

54 新規スレ立て人募集　社説＋の募集スレまで 2023/03/03(金) 23:47:42 ID:yrItBiz0 >>56

>>48
質問を理解するんだから中身を定量的に把握はしてるんじゃないか？

56 新規スレ立て人募集　社説＋の募集スレまで 2023/03/04(土) 00:52:14 ID:7VwQiILM >>57

>>54
いや、膨大なデータの中からその文章に続くことの多い言葉を選んでるだけだな、基本は

57 新規スレ立て人募集　社説＋の募集スレまで 2023/03/04(土) 11:59:17 ID:/4CrZR+W

>>56
俺達も自分の書こうとしてる文章は添削するからそういった意味では一緒だろうけどな

問題は意味か
例えば文章中で品詞が重なる場合の感覚的な理解をチェックしたりあえて聞いたりしてどういう答えが返ってくるかに依るのかな
こうなるとチューリングテストと変わらないな
イライザ効果って言葉を今初めて知ったレベルの素人の俺からしたらAIと人間を区別出来る手段を知らない

AIの完成度がデータの品質という環境によって左右されるなら、AIの完成度を"試そう"とする者達が居ると基本的にAIは完成・大成しないと思う

51 新規スレ立て人募集　社説＋の募集スレまで 2023/03/03(金) 14:00:55 ID:kInlpaSH

ChatGPTで自分の名前を検索したら、犯罪歴有りとなった。
裸でジョギングして捕まったとか。
笑える。

まあ、本当なんだけど。