今回は10〜15分程度の日本語Youtube動画を2本取り上げ、それを生成AI(ChatGPT-4、Claude)に要約させて見ることにします。どちらも大学進学に関するテーマです。
結論を先取りしますと、生成AIの要約には大きな間違いはなさそうですが、大事な論点や情報が欠如していました。役には立ちますが、全面的に依存できないくらいの能力しかないということです。
なお別の機会に詳しく述べますが、東大の入試英語の要約問題をAIに解かせますと、いつも毎回ちょっと「足りない」回答になってしまいます。要するに、AIの要約力の現在地は、そういう段階なのです。
最初に取り上げるのは、山内太地の動画です。山内さんは、1)日本の大学を全部回り、2)非エリート高校生の立場に立って大学進学を考え、3)危機の時代の大学サバイバルについて見識を持つ大学ジャーナリストです。
動画は「潰れそうな私大を公立化した大学に行く価値はあるか」(←必要であれば、クリックしてください)(13:46)です。時間は13分46秒の動画で、隙間時間にサッと見るにはやや長い動画が、生成式AIにとって負担になるほどの長さではないものです。
まずはChatGPTに作業させてみました。早速、要約をみてみましょう。
1. 潰れそうな私立大学が公立大学になることで、学生募集に成功し、人気を獲得している例が増えている。
2. 公立化された大学は、学生募集の面で効率化され、以前よりも学生にとって魅力的になっているが、個々の学生が自分に合った大学かどうかを慎重に考える必要がある。
3. 公立化された大学は、研究や教育の質では伝統的な公立大学に劣る可能性があり、地方の高校生にとっては特に魅力的であるが、都市部の生徒にはそうでない場合もある。
4. これらの大学は、地方での就職に強く、公務員や地元の良い会社への就職が期待できる。
5. 私立大学が公立化する動きは今後も続く可能性があり、地方の高校生にとっては有利な選択肢となるが、全国的なレベルでは必ずしも最良ではないかもしれない。
この要約はおそらく大きく間違っている訳ではありません。しかし、ハッキリ言って全然面白くないですね。というのはこの要約では、伝統的国公立大学>公立化した元地方私大>地方私大 というあまりにも分かりきった図式を提示しているだけだからです。要約だとしても、これでは情報力はゼロです。
そして一番まずいのは、具体的な大学名が一切出てこないことです。そこで、次のような指示を出してみます。
私の命令
具体的な大学名を挙げて要約することは出来ますか?
また、動画のスクリプトをチラ見してみると、かな漢字変換が非常に不味いので、予め学習させておきます。
「冥王大学」は「名桜大学」の間違いです。
「高知効果大学」→「高知工科大学」です。
すると、次のように応答してきました。
ご指摘ありがとうございます。それを踏まえて、修正した要約を提供いたします。
1. 長野大学:公立化前は学生募集に苦戦していたが、公立化後に人気が急上昇し、全国から受験生が集まるようになった。
2. 名桜大学(沖縄):交通の便が悪い地域に位置するものの、公立化により人気が急上昇し、全国の受験生が目指すようになった。
3. 鳥取環境大学、長岡造形大学:私立大学時代は苦境にあったが、公立化により学生の関心が高まり、人気を回復した。
4. 山口東京理科大学、諏訪東京理科大学:東京理科大学から独立し、公立化されたことで名門公立大学としての地位を築いた。
5. 高知工科大学、福山公立大学、公立小松大学、公立千歳科学技術大学:これらの大学も公立化により学生募集に成功し、特に地元での就職に強い点が評価されている。
新興の地方公立大学の名称がいくつか出てきました。しかし、全てワンパターンな説明で、要するに、新興の公立化大学の礼賛でしかありません。批判的な観点がすっぽりと抜け落ちてしまっているのです。これでは要約としては、むしろ劣化です。そこで、次のように修正を要求してみました。
私
必ずしも公立大学のことを評価している内容ではありません。しばしば批判的な言及もあるはずです。
ChatGPT
批判的な観点を含めた要約を提供いたします。
1. 長野大学:公立化により受験生の注目を集めたが、学生一人一人が自身に合った大学かどうかを慎重に考える必要がある。
2. 名桜大学(沖縄):公立化に伴い人気が上昇したが、地理的な不便さや教育の質に関しては考慮が必要。
3. 鳥取環境大学、長岡造形大学:公立化により人気は回復したが、公立化以前の苦境が影響している可能性がある。
4. 山口東京理科大学、諏訪東京理科大学:名門としての地位を築いたが、東京理科大学との関連から独立したことで、教育内容や研究水準についての懸念が残る。
5. 高知工科大学、福山公立大学、公立小松大学、公立千歳科学技術大学:これらの大学は公立化により学生募集に成功したが、地方国立大学と比較して教育や研究の質が劣る可能性がある。また、地元での就職には強いが、全国的な視野での評価は異なる場合がある。
前よりは良くなりました。しかし、山内太地さんの動画の肝心なメッセージはほとんど伝わっていません。僕が動画要約力試験の試験官であれば、今回の出来では「不合格」です。新興の公立大学に進学する価値があるのか、それとも思い切って都会の私大を選択すべきなのかという、人生の分かれ道に立つ高校生には、なんの役にも立たない要約だからです。
なぜ今回の動画で、生成AI(ChatGPT)が適切な要約を出来なかったのか。おそらくその理由の一つは、AIが映像情報を読みこまないからでしよう。
ちなみに今回の山内さん動画「板書」を見てみましょう。これを見るだけで、瞬時に要旨を想像できるようにに思われます。
特に最後の山内さんのアドバイスは貴重です。すなわち、1)必ず大学のキャンパスに行ってみろ、2)本当に入りたいのか、よく考えてみろ、3)田舎の公立大学の良いところをさがし、もし見つかれば進学してみろ、です。
残念ながら生成AI(ChatGPT)では、これらの大事なアドバイスがすっかり捨象されていました。もしかすると、映像で重要な情報を提供している動画番組を要約させるのは、2024年の生成AIには厳しいのかもしれませんね。
下の写真4枚は、山内さんの動画(←興味がある方はクリックしてみましょう)をコピーしたものです。
↓
↑山内さんの動画より
ChatGPTによる要約があまりに杜撰でしたから、Claudeにも要約させてみました。
以下の要点をまとめました。
– 潰れそうな私立大学を公立化した大学に行く価値はあるか
– 長野大学をはじめ、経営が苦しくなった私立大学が公立大学に転換し人気校に
– ただし、研究教育内容では地方国立大学に劣る可能性が高い
– 受験生は国立大学に入れないから行くだけで本当に入りたいか考えるべき
– 公立大学の立地や設備を確認し、4年間過ごしたいか判断が必要
– 推薦で行く以上、公立大学の長所を見つける努力が必要
– 個々の大学の努力は評価するが、新設公立大学には厳しく問うべき点もある
– 受験生は2番手、3番手大学に入るだけでなく、自分にとってベストな大学を見極めることが大切
これは、まあまあ悪くない要約になっています。しかし、具体的な大学名は長野大学しかありませんので、ちょっと不満です。そこで次のように命令してみました。
私
具体的な大学名も出してください。
Claudeの発言
はい、具体的な大学名も追記します。
– 潰れそうな私立大学を公立化した大学に行く価値はあるか
– 長野大学や高知工科大学、静岡文化芸術大学など、経営が苦しくなった私立大学が公立大学に転換し人気校に
– ただし、研究教育内容では信州大学や鳥取大学、山口大学などの地方国立大学に劣る可能性が高い
– 受験生は信州大学や鳥取大学に入れないから長野大学や鳥取環境大学に行くだけで本当に入りたいか考えるべき
– 公立大学の立地や設備を確認し、4年間過ごしたいか判断が必要
– 推薦で長野大学に行く以上、長野大学の長所を見つける努力が必要
– 個々の大学の努力は評価するが、新設公立大学には厳しく問うべき点もある
– 受験生は2番手、3番手大学に入るだけでなく、自分にとってベストな大学を見極めることが大切
これならば、比較的良い要約になっていると思います。
しかし、大切な情報(例。「実際にキャンパスを訪れてみて、高校みたいな小さな大学キャンパスで満足できるのか自問自答せよ」)が欠如し、逆に分かりきった内容(例。「潰れそうな私大が公立化しても、伝統のある地方国立大学よりも劣る」)がとりあげられるなど、大いに不満でもあります。
また、生成AIに動画について質問をすると、山内太地さんの情報や意見ではなく、生成AIの意見を陳述しだすかもしれませんから、要注意要です。実を言うと、今回Claudeは次のような「情報」を提供したりしました。
Claude
公立化した地方私大は、早稲田大学や慶應義塾大学、明治大学、中央大学、立教大学などの東京の有名私大に劣る可能性がある。
バカバカしくてお話にならないくらい、陳腐な情報です。
この動画の地方在住受験生が知りたいのは、たとえば(公)長野大学と明治大学のどちらが良いかではなく、(公)長野大学と、桜美林大学や関東学院大学のような都会の私大ならばどちらが良いのかという選択問題だからです。あるいは、お金をかけて上京して東京の私大に入る価値はあるのか、それとも地元の新興の公立私大に進学したほうが良いのか、という問題なのです。
AIは便利だが、使い方も工夫しなければなりませんね。
そこで再度Chat-GPTに、今度はChat-GPT4.5(非公式版)に命令(=プロンプト)し直してみました。命令によっては、より適切な要約も出来るかもしれないからです。
私の命令は以下のものです。
以下はあるyoutubeのスクリプトです。これを、潰れそうな地方私大が公立化して出来た地元の公立大学に行こうか、それとも都会の私立大学に進学したほうが良いのかと迷っている高校生に役立つように役立つようにまとめてください。(ここで、山内動画のスクリプトを添付)
そうしたら、次のような答えが返ってきました。
📚 **YouTubeスクリプト要約:地方公立大学と都会私立大学の選択**
このYouTubeスクリプトは、地方私立大学が公立化した後の状況と、それが高校生の大学選びにどのように影響するかについて議論しています。以下に、地方に住む高校生が地元の公立大学か都会の私立大学かを選ぶ際に考慮すべきポイントを要約します。
1. **公立化された大学の特徴**:
– 経営難から公立化された大学は、人気が急上昇し、全国の受験生から注目を集めるようになりました。
– これらの大学は教育内容や就職においても一定の定評がありますが、伝統的な公立大学や国立大学に比べると優れているとは言い切れない面があります。
2. **地方公立大学の選択理由**:
– 学費の安さや地元への近さが主な理由ですが、それだけで選ぶべきではありません。
– 地元での就職に強い点や、地域に密着した教育を受けられることが魅力です。
3. **都会私立大学の魅力**:
– 多様な学問分野、活発な学生活動、広範な人脈構築の機会があります。
– 大企業への就職機会が豊富で、都会特有の華やかな環境を提供します。
4. **自分に合った選択を**:
– 経済的な理由だけでなく、教育内容、キャンパス環境、将来の目標などを総合的に考慮して選ぶべきです。
– 実際にキャンパスを訪れ、自分がそこで学び、生活することをイメージすることが重要です。
スクリプトは、公立化された大学に対する一般的な見方と、受験生が直面する現実に基づいた意見を提供しています。重要なのは、単に公立化されたという事実ではなく、その大学が受験生個人のニーズや目標にどのように合致するかを慎重に考えることです。
ううむ、ちょっと困りましたね。苦笑いしてしまいます。多少良くなった側面もありますが、全体としてむしろ悪くもなっています。生成AIが自分の意見(=オンライン世界で溢れている一般論を反映した陳腐な意見)を混入させてしまっているのです。
というのは「3.都会私立大学の魅力」は、Chat-GPT4.5(非公式)の捏造だからです。山内さんは都会の私立大学のオしだとは思いますが、こんな発言はしていません。そもそも、都会私立大学に入学すれば大企業への就職機会が豊富だとか、都会の華やかな環境ありますよなどといった謳い文句は、ちょっと詐欺的です。
ここで対象となるのは、有名国立大学だとか地方国立大学をめざす高校生ではありません。つまり、信州大学や静岡大学をめざしているのではなく、例えば、(公)長野大学に進学すべきかどうか迷っている高校生です。言ってみれば、県立の二番手三番手の高校生を想定してみるのです。
このレベルの高校生が都会の私大を目指すとしたら、日東駒専や神奈川大などの有名私大はほぼ不可能です。目標とすべきなのは、大東亜帝国レベル、あるいはその下のレベルの私大でしょう。たとえば、国士館だとか桜美林あたりが適当な目標大学となるでしょう。このとき、国士舘や桜美林に入れば、大企業や有名企業へ就職できる可能性が増えるよなどといった「アドバイス」を、良識のある人ならばしません。(なお、国士舘が就職に強いのは、大企業ではなく警察官などの公務員である。将来、お巡りさんになりたいという高校生ならば、悩むところであろう)。
我々としては、生成AIにしっかりと面白い情報を伝達してもらいたい。だから、生成AIがあまり良い回答を出してくれないならば、命令(=プロンプト)し直して、より充実した異なる情報を引き出したいのです。
しかし、詳しい回答を我々が求めようとして過剰な(?)命令を与えると、生成AIは余計なくだらない自己見解(=しばしば、常識的で紋切り型)を混入してしまうのです。まことにAIとの接し方は難しいです。(ただし、「今の見解はあなたの見解ですか?」と質問すれば、生成AIは正直に答えてくれますので、ご安心を)。
オタキング(オタクの王様)として有名な岡田斗司夫のYOutubeサイトから、その人生相談を取り上げてみましょう。ここでもテーマは大学進学に関連するものを取り上げましょう。
私が選んだ動画は、岡田斗司夫の人生相談 「それでも行くというのなら、これだけは覚えておいてください」 【偏差値65以下/Fラン大学/岡田斗司夫/サイコパス/おじさん/人生相談/切り抜き/】 (←クリック) 2023年7月 (10:46)です。
このYoutubeの最初の画像を見ると「カスな大学は行っても無駄です」となっていますが、どういう内容でしょうか。Claudeに要約させてみました。
要約すると、以下のようなポイントがあります。
– 偏差値65以下の大学に行っても意味はない
– 現在の日本の大学は投資に見合う価値がない
– 10年後には親から無駄な大学に行けと言われることはなくなる
– 偏差値が高ければ大学に行ったほうがいいが、そうでない場合は行かなくてもいい
– 大学時代に出会いや可能性を試す場として意味がある
– 大学受験に失敗し、低レベルの大学に入っても卒業しなかった例がある
– 成功の定義は個人による。学歴はある意味有効なカードだが、絶対的なものではない
– コメント欄を活用して意見交換をしてほしい
この要約に、いわゆる間違いはありません。しかし、岡田さんのメッセージがほとんど伝わってはこないのです。現在のAIでは、一見すると矛盾に充ちている、彼の主張をうまく交通整理することが出来ないのでしょうね。
岡田さんは偏差値65以下の二流三流の大学に進学しても、投資としての価値はないかもしれないね。だから無理して行く必要はないかもしれないね、と述べています。しかしこの発言は彼のここでの主要な「イイタイコト」ではないでしょう。エッセイでいえば「前置き」や「譲歩」にあたるものです。
つまり、彼が言いたいのは、3流大学でも運が良ければ良い事もあるかもしれないし、まあ、大学に進学しても良いんじゃないの。たとえば、岡田斗司夫の場合は、こんな良いことがあったよ,なのでした。
微妙な発言ですから、要約に馴染まないともいえますね。しかし、このYOutubeを視聴する意味は、そういう要約しきれない箇所にあるのです。だからClaudeには、次のように、要約文の修正を要求しました。
私
「もっといろいろな話題があったと思います。それらの話題も紹介してください」。
するとClaudeは、
はい、その通りです。要約ではカバーし切れなかった話題もたくさんありました。
– 岡田さん自身の大学受験の話
– 親からの自立、自由な時間とお金、彼女がいることを幸せだと考える受験生の話
– 岡田さんの大学時代にアニメ製作に励んだ話
– 受験生の能力や個性がない場合に学歴が武器になる話
– 岡田さんが入学した大学の低いレベルの話
– 人生の成功の定義は個人差が大きい話
– コメント欄を活用して意見交換をする大切さ
など、要約では表現しきれなかった話題がたくさん含まれていました。要約という形で簡潔に示したつもりでしたが、充分ではありませんでした。失礼しました。今後はより包括的な要約を心がけます。ご指摘いただきありがとうございます。
最初から、そういう話題を取り入れながら要約をしてくれたら、ずっと良かったのですがね。どうやら、こういう作業は、現在の生成AIには難しいようです。
動画作成者がどんな人物で、その動画はどういう傾向の情報を提供するのか、あらかじめ把握していないと、ChatGPTやClaudeから適切な情報を簡単に引き出すのは難しそうです。生成AIは、質問(プロンプト)を変えれば、異なる文章を生成してくれますが、適切な追加質問や修正要求をするのが難しいのです。
つまり、ChatGPTに頼れば、面白い情報を簡単に収集をできると思っていたら、全くの大間違いだぞ!