Latest / おちつきAI 短編集〜生成AIのポイントを短く解説〜 / AIと思考力低下の研究をどう読むか

Transcript

AIと思考力低下の研究をどう読むか · おちつきAI 短編集〜生成AIのポイントを短く解説〜

0:02
しぶちょー: よく言われるAIを使うと思考能力落ちるよねみたいなこれは
0:09
しぶちょー: 一応論文になってるんだよね
0:13
かねりん: 信用性が高い
0:16
しぶちょー: Your Brain on ChatGPTあなたの頭の中に
0:20
しぶちょー: ChatGPT入っちゃってますよみたいな置き換わっちゃってますよみたいな
0:25
かねりん: 論文層ねえよって
0:26
しぶちょー: これはね論文を執筆させたんだよね54人ぐらいを
0:31
しぶちょー: 18歳から39歳ぐらいまでの54人を3つのグループに分けて論文を執筆させますと
0:39
しぶちょー: 一人はChatGPT使っていいよと一人は検索エンジン使っていいよと
0:43
しぶちょー: もう一人は道具なしですよみたいなちょっと文章書いてって書かせた時の
0:48
しぶちょー: ノウハウを測定した結果やっぱそのChatGPTの使った方がやっぱ脳の
0:55
しぶちょー: 信号みたいなやつとか結びつきネットワークがすごく弱くて
0:59
かねりん: なるほど
1:00
しぶちょー: 自分が書いた文章ChatGPTを使いながらも自分が書いた文章なんだけど
1:06
しぶちょー: 自分の書いた文章覚えてない
1:09
かねりん: 覚えてない
1:10
しぶちょー: 覚えてないし自分が書いた文章を引用してなんか言うこともできなかったみたいな
1:15
かねりん: ChatGPTを使いながら書いた覚えなさそうだな
1:18
しぶちょー: だからアウトプットしてるようで自分の頭で考えてないよねみたいな
1:24
しぶちょー: これを認知的不責という風になんか名付けたらしくて認知的不責だから借金したように
1:31
しぶちょー: 無くした分借金みたいな感じでなんか脳なんか頭悪くなるよねみたいな負債?
1:38
しぶちょー: 負債認知的負債としていう風に名付けたよみたいなこういう話があってですね
1:46
しぶちょー: これはあくまでも査読付きというかこういうことやりましたよみたいな
1:51
しぶちょー: 簡単な論文みたいな感じなんだけど
1:54
しぶちょー: すごくSNSで取り出されてChatGPTを使うと頭が悪くなるんだみたいな
2:00
かねりん: 驚きやすいな
2:01
しぶちょー: すげえ驚きやすいからさめっちゃバズったんだよこれ
2:04
しぶちょー: なんだけど結局なんかこれもう頭がAIを使うと頭が悪くなるよ考えなくなるよっていう
2:15
しぶちょー: そういう単純な結論じゃないよそもそも54人に対してしかやってないから
2:19
しぶちょー: 研究者がちょっとあまり騒がないでねっていう風に出したみたいな
2:26
かねりん: なるほどね
2:27
しぶちょー: いわゆるその査読ついてないから放っておくとまずいよねみたいな
2:34
かねりん: 論文ってなんかグレードがいっぱいあるんでしょ
2:37
しぶちょー: グレードがいっぱいある
2:37
かねりん: 査読つきのやつとなんかいろいろさでこれなんか別に論文って言うとなんかさ一般人はさ
2:46
かねりん: うわもう確定した事実だって思っちゃうけど
2:50
しぶちょー: そうそうそう論文って言うともうなんかそれだけで権威があるって感じなんだけど
2:54
かねりん: 誰でも出せるんでしょ
2:55
しぶちょー: 誰でも出せるやつもあるし
2:56
しぶちょー: 査読っていっていろんな教授とかが読んでこれオッケーですねみたいな
3:01
しぶちょー: 出さなきゃいけないその査読を通るのがすごい大変らしくて
3:06
しぶちょー: 俺もあんまり書いたことないからわかんないんだけど
3:08
かねりん: 同じ状況を再現できなかったらダメみたいななんかあるでしょ
3:12
しぶちょー: そうだねいろんな視点があるみたいな
3:15
しぶちょー: なんかね俺が聞いたのはいろんな教授に見てもらって
3:19
しぶちょー: オッケーだよねって言ってもらえればオッケーって感じかな
3:23
かねりん: なんか有名なネイチャーとかそういう雑誌に掲載されると権威あるみたいな
3:29
しぶちょー: そう査読通ってそうだね掲載されるっていう感じなのかな
3:34
かねりん: それはなんかレベル上がるんだよね
3:36
しぶちょー: そうでインパクトファクターって言って引用されたらすごくいいよねみたいな
3:42
しぶちょー: ブラックペアンだブラックペアン
3:45
かねりん: なんか医療系のドラマでよく出てくるはずのインパクトファクター
3:49
しぶちょー: そうなんか引用されてる論文って偉いよねっていうやっぱ評価指標なんだよね
3:55
しぶちょー: いろんな論文を引用して研究するけど引用が多ければ多いほど
3:59
しぶちょー: やっぱその研究の影響多いよねみたいな
4:01
かねりん: なるほどねまだそんな真っさらの雑魚論文でピッて出てきたってことだよね
4:07
しぶちょー: そうだね査読を取るのがすごく難しくらしくて
4:11
しぶちょー: うちの会社でも博士課程に行ってた先輩とか
4:15
しぶちょー: 行ってさ博士取るだけどやっぱり査読付き論文を何本出して
4:21
しぶちょー: 論文掲載もして学会発表もしてみたいな
4:24
しぶちょー: その博士になるための条件みたいなやつがあるのよ
4:29
しぶちょー: その査読付き論文をね何本出さなきゃいけないみたいなやつがあって
4:32
しぶちょー: それがめっちゃ大変らしくて
4:34
かねりん: そうな結構大変なんだ
4:36
しぶちょー: 半分政治みたいなのもあるらしいけどね
4:38
かねりん: へえ人間だね
4:39
しぶちょー: なかなか見てくれないけどそのちょっとトップダウンでついてもらうと
4:46
しぶちょー: この教授の息がかかってる論文ですからみたいな
4:51
しぶちょー: じゃあスクートしますみたいなあるとかないとか
4:54
かねりん: 人間社会どこでも政治
4:57
しぶちょー: 妄想の話かもしれないけど
4:59
かねりん: 妄想か
4:59
しぶちょー: あるとかないとかあるらしいですけどね
5:04
かねりん: じゃあこれ全然大したあれな嘘ですか
5:10
しぶちょー: 嘘というかそうねあんまりこう信じないでくださいねっていう風に
5:17
しぶちょー: 言ってるとこういうのが出回っちゃうと
5:20
しぶちょー: もうなんかいろんな政策担当者がじゃあもうChatGPT禁止のなんか号令出そうみたいな
5:29
かねりん: そうだよね
5:29
しぶちょー: 教育に使っちゃいけないよみたいな話になってきちゃうからそれは極端すぎるもんで
5:34
しぶちょー: そういう先走りそうだからブレーキをこうなんかかける意味でもいろいろとやってると
5:41
しぶちょー: やっぱり研究者としては見出しぼらないでねとか
5:44
しぶちょー: 読中ですよっていう風に一応発信はしてるんだけど論文SNSみたいな分かるでしょ
5:51
しぶちょー: こういう論文発表されましたみたいなこんな聞き返したみたいなゆうちゃん
5:57
しぶちょー: この論文はまだこういう状況でみたいなこと
6:00
かねりん: 一時書かない
6:02
しぶちょー: 論文です
6:03
かねりん: いかにインプレッション取るか
6:05
しぶちょー: 論文って言っただけでまあそっかこれがじいさんだみたいなねなるから
6:11
かねりん: 論文っていう言葉の威力すごいよな
6:13
しぶちょー: すごいよねそうそうそう
6:16
かねりん: 1から100までレベル全部論文だもんね一般人から
6:20
しぶちょー: 一般人からするとやっぱそのアカデミックな分野にいる人にとってはさ
6:25
しぶちょー: そのそこの粒度ってめっちゃわかると思うんだけど我々にとって論文って言われて
6:31
しぶちょー: あもう研究成果なんだみたいな
6:34
かねりん: 本当それよ
6:35
しぶちょー: 世界の真実なんだみたいな
6:37
かねりん: そうなんかブラックホール見つけましたみたいなそういうレベル
6:41
しぶちょー: 論文もめっちゃ嘘あるもんね
6:43
かねりん: あるんだね
6:44
しぶちょー: めっちゃ嘘あるしなんかやっぱ疑ってかからないと
6:47
かねりん: 悪意のある論文もあるってこと?
6:51
しぶちょー: 悪意のある悪意かわかんないけどめっちゃ適当な論文はいっぱいあるよね
6:55
かねりん: 嘘だけど出しちゃえばインプ取れるしみたいな
6:59
しぶちょー: 嘘だけど出しちゃえばあると思う
7:00
かねりん: 驚き屋さん論文みたいなやつ研究者驚き屋研究者みたいな
7:05
しぶちょー: でも俺も大学の時教授言っとったもんなんかこの研究室の論文全部信用しないでみたいな
7:12
しぶちょー: 自分のところじゃなくてここの大学のこの研究室の論文は嘘っぱちだわ
7:19
しぶちょー: みたいなまた変なの出してるわほらみたいな
7:23
しぶちょー: こんなんずっとやってないわみたいなそういう戦いを
7:26
しぶちょー: 適当に出しやがってみたいなこと言ってたから
7:28
かねりん: そんなレベルのが上がってくることがある
7:32
しぶちょー: それも全然ある
7:34
かねりん: それはじゃあGPTに聞けばいいんですかねこの論文の信憑性どうですかみたいな
7:40
しぶちょー: でもいいと思うよレベルは言ってくれると思うし俺も最近なんかね論文入れてこれ訳して
7:47
しぶちょー: って言ったらこの論文はただしなんか査読がついてないので
7:50
しぶちょー: こういうレベルの論文ですみたいなこと言ってきたちゃんと教えてくれた
7:55
かねりん: いいですね論文もちょっと民主化されていくね
7:58
しぶちょー: 何をもって論文とするか何でも論文論文って
8:03
かねりん: 論文って何どっか学会で発表したら論文
8:06
しぶちょー: 学会で
8:09
かねりん: 論文って何をみたいな感じブログと何が違うのみたいなちょっと高級なブログみたいなさ
8:16
かねりん: なんかPDFになったブログみたいな本を終わったとどめてねよくわかんねえんだよ
8:24
かねりん: でも別に誰かがレビューした編集者が入ってるわけでもないってこと言うと
8:29
かねりん: 本より信憑性ないんじゃねえのみたいな
8:32
しぶちょー: 本より信憑性ないやつも本も信憑性ないよ
8:36
かねりん: まあそうだけどまだ編集者の手が入ってんじゃん
8:41
しぶちょー: まあまあ出版社によりけりかな
8:43
かねりん: そいつが書いてそいつがそのまま出せる
8:47
しぶちょー: いや
8:48
かねりん: ノーチェック
8:48
しぶちょー: ノーチェックは無理でしょやっぱ大学の名前で出してるからさ
8:52
かねりん: 一応大学の誰か見てるってこと
8:54
しぶちょー: 見てるのか分かんないけど出し方によっては別にそのままボーンってね
8:59
しぶちょー: アーカイブスであげれますよみたいなやつはあると思うし
9:02
しぶちょー: これもあんまり正直書いたことないから分かりません
9:06
かねりん: ちょっと書いてみたいね論文
9:08
かねりん: 何かちょっと要はなんかさよく社会人博士課程みたいなのあるじゃん博士大学院みたいな
9:16
かねりん: なんかさそれでなんか書いてる人いるじゃん俺らだったらなんだろうね
9:24
しぶちょー: 別に趣味で書いてるわけじゃないあれは担当教員教授がいるよちゃんと
9:28
かねりん: いるんだけどなんかちょっとアカデミックなことになんないかしらこれなんかね
9:34
かねりん: 人の声と心の関連についてみたいな
9:41
しぶちょー: ポッドキャストの研究してる子がいたよ
9:43
かねりん: いいねいいね
9:44
しぶちょー: ポッドキャストの研究してる子いてなんか一回協力したよインタビュー
9:48
かねりん: それ論文書いたのかな
9:50
しぶちょー: 卒論で書くって言ったね
9:53
かねりん: そういうのも上がってくるってこと論文で上がってくると思う
9:56
しぶちょー: アンケート結果の一人だから何十人のポッドキャスターの一人として
10:00
しぶちょー: データとしてね俺がそこに介在していると思うけど
10:04
しぶちょー: 30分くらいヒアリングさせてくださいみたいな
10:07
しぶちょー: 一回ポッドキャスターとして話した気がする
10:11
かねりん: 大量の人間のデータが取れたら何かしら研究になるよねって思ったり
10:17
しぶちょー: だけど大量ってどのくらいなのとか
10:20
しぶちょー: じゃあその数字の信憑性は何みたいなところからやっぱちゃんとやっていかないといけなくて
10:27
しぶちょー: それはやっぱ統計学に基づいた数字が必要だよねっていう
10:30
しぶちょー: それをサンプリングも重要やんねじゃあこの人たちのこの集団から取りますよみたいな
10:39
しぶちょー: 母集団って言うんだけどさゴッて取ってきたときにこの母集団が本当に
10:45
しぶちょー: バイアスが含まれてないかっていう評価も必要だし
10:49
しぶちょー: 結構誰でも集めりゃいいってもんじゃないよねみたいな
10:54
しぶちょー: 自分の身の回りを集めていっぱい聞いてもさやっぱそこに偏りがあるよね
10:58
かねりん: こんなおちつきAIリスナーなんかにしたらもう偏りしかない
11:02
しぶちょー: おちつきAIにリスナーを対象として何かアンケートを取ってもやっぱ偏りだよ
11:07
しぶちょー: すごい偏ってると思うよ
11:09
しぶちょー: そのなんか純粋なその特性を代表するような母集団を取れるかどうかっていうのが結構重要なんだけど
11:18
かねりん: なるほどね
11:19
しぶちょー: 研究ってそこを結構ツッコミ入れるよねだからこの母集団の取り方だめだじゃんみたいな
11:24
かねりん: 最初からバイアスかかってんじゃんみたいな
11:26
しぶちょー: そうそうそうっていうので結構反論みたいなことをやっていくパターンがよくあるかな
11:32
かねりん: なんかちょっと楽しそうだねそういう論文の世界もね
11:37
しぶちょー: いや楽しそう
11:39
かねりん: 反論とかしたいわ俺
11:40
しぶちょー: あそうなんかひたすら反論してくって言ってたよなんかだから
11:45
かねりん: ポイントになるのその反論も
11:47
しぶちょー: いやなんかそういう読み方をするって言ってた論文を
11:50
かねりん: 読み方としてそうなんだね
11:53
しぶちょー: そう反証を前提で読んでいくなんて言ったかななんかこのような教えてもらったら
11:59
しぶちょー: ボイシーでコラボした人に教えてもらったんだよな
12:01
しぶちょー: こういう読み方をします名前忘れちゃったけど
12:04
しぶちょー: その人の名前じゃなくてその方法の名前忘れちゃったんだけどとにかく論文を読むときは
12:11
しぶちょー: どこに突っ込みどころがあるかっていう視点でまず読みます
12:15
かねりん: 重箱の隅つつき屋さんだ性格悪くなりそうだねやっぱねそういう風に
12:21
しぶちょー: 突っ込んでいくことによって本当にこれは信じていいのかどうかを見ていくみたいな
12:27
かねりん: 刑事にでもなったら
12:29
しぶちょー: ここが不十分じゃないかみたいな
12:31
かねりん: 人を疑って
12:31
しぶちょー: それ刑事の仕事
12:35
かねりん: 刑事の仕事です全てを疑う被害者も疑うみたいな
12:41
しぶちょー: でもある種落ち着きのために必要な視点だと思うよ俺はそれ
12:48
かねりん: どういうことどういうことですか
12:51
しぶちょー: 驚き屋さんに対してさわーすごいわーって驚かされるんじゃなくて
12:58
しぶちょー: 本当かおいあーっていうさ
13:01
かねりん: そうだね落ち着きおちつきAIのMCとしてはもう必須の素養です
13:08
しぶちょー: 必須のスキルやっぱ
13:09
かねりん: それなかったらもうダメです
13:10
しぶちょー: それなかったら一緒に驚いてるだけでわーすごいよーって