CCN 寺子屋自由研究ラボテクノロジー生成 AI が得意なこと・苦手なことを実験する
← 🤖 テクノロジー一覧に戻る
生成 AI が得意なこと・苦手なことを実験する

🤖 テクノロジー

生成 AI が得意なこと・苦手なことを実験する

🔬 中学生向け ★★★ ⏱ 実施3〜5日

生成 AI にいろいろな質問をして、得意な回答と苦手な回答を比べて調べる研究です。

生成 AI は、文章を作る、要約する、アイデアを出すなどが得意です。一方で、最新情報、細かい事実確認、計算、あいまいな質問への回答では間違えることもあります。この研究では、同じ AI に種類の違う質問を出し、回答の正しさ、分かりやすさ、具体性、役立ち度を比べます。AI を便利な道具として使うだけでなく、「どんな時に注意が必要か」を自分で確かめられる点が大きなおもしろさです。

必要なもの

材料分量代替案
パソコンまたはタブレット1台生成 AI への質問、記録、まとめに使う
インターネット環境1回線生成 AI や確認用サイトを見るために使う
生成 AI サービス1種類質問に対する回答を作らせる
ノートまたは記録用紙5枚質問、回答、気づきを書く
表計算ソフトまたは方眼紙1つまたは3枚評価表やグラフを作る
筆記用具1セット手書きメモに使う
タイマー1個回答にかかった時間を測る
確認用の資料3種類以上教科書、辞典、公的サイトなどで事実確認する
評価シート12問分5点満点で回答を評価する
発表用紙またはスライド3〜5枚結果を発表するために使う

手順

1

実験の目的を決める

何をする:「生成 AI は何が得意で何が苦手か」を調べる目的を書く。

どうやる:ノートに「正確性」「分かりやすさ」「創造性」「注意点」の4項目を書き出す。

なぜ:最初に見るポイントを決めると、ただ遊ぶだけでなく研究として比較できるからです。

2

質問の種類を4つに分ける

何をする:生成 AI に出す質問を分類する。

どうやる:「事実を聞く質問」「文章を作る質問」「アイデアを出す質問」「計算や論理を使う質問」を各3問ずつ、合計12問作る。

なぜ:質問の種類を分けると、AI の得意・苦手を比べやすくなるからです。

3

質問文をそろえて入力する

何をする:作った12問を生成 AI に入力する。

どうやる:1問ずつ同じ形式で入力し、回答をコピーして記録用紙や文書ファイルに貼り付ける。

なぜ:入力のしかたがばらばらだと、結果の違いが質問の違いなのか入力方法の違いなのか分かりにくくなるからです。

4

回答時間と文字数を記録する

何をする:AI の回答の速さと量を記録する。

どうやる:タイマーで回答が出るまでの時間を測り、文字数は文書作成ソフトの機能や手計算でおおよそ数える。

なぜ:速く長く答えられても、正しいとは限らないことを確認するためです。

5

事実確認をする

何をする:AI の回答が正しいか調べる。

どうやる:教科書、辞典、公的機関のサイトなど、信頼できる資料を3種類以上使って確認する。

なぜ:生成 AI はもっともらしく間違えることがあるため、別の資料で確かめる必要があるからです。

6

5点満点で評価する

何をする:回答を点数化する。

どうやる:各回答について「正確性」「分かりやすさ」「具体性」「役立ち度」を1〜5点で評価し、合計点を出す。

なぜ:感想だけでなく数字にすると、どの種類の質問に強いかを見つけやすくなるからです。

7

得意な質問と苦手な質問を分ける

何をする:点数と内容を見て、AI の得意・苦手を整理する。

どうやる:合計点が高い質問を「得意」、点数が低い質問や間違いがあった質問を「苦手」に分類する。

なぜ:結果を分類すると、AI をどの場面で使いやすいか考えられるからです。

8

表とグラフにまとめる

何をする:実験結果を見やすくする。

どうやる:質問の種類ごとに平均点を出し、棒グラフにする。間違いがあった回答は別の表にまとめる。

なぜ:グラフにすると、文章だけよりも結果の違いが伝わりやすいからです。

9

考察を書く

何をする:結果から分かったことをまとめる。

どうやる:「AI はどんな時に役立つか」「どんな時に確認が必要か」「人間が判断すべきことは何か」を各3〜5文で書く。

なぜ:自由研究では、結果だけでなく自分の考えを示すことが大切だからです。

観察ポイント・記録の取り方

つまずきやすいポイント

⚠️ 質問があいまいすぎる

なぜ:「環境について教えて」だけでは範囲が広すぎます。「中学生向けに、食品ロスの原因を3つ説明して」のように条件を入れます。

対処:

⚠️ AI の回答を正しいと思い込む

なぜ:生成 AI は自然な文章で間違えることがあります。必ず教科書や信頼できる資料で確認します。

対処:

⚠️ 評価が感想だけになる

なぜ:「すごい」「分かりやすい」だけで終わらせず、正確性、具体性、役立ち度などの評価基準を使います。

対処:

⚠️ 個人情報を入力してしまう

なぜ:自分や友達の本名、住所、学校名、電話番号、写真などは入力しません。

対処:

⚠️ 質問の条件がそろわない

なぜ:ある質問だけ長い条件を入れると比較しにくくなります。できるだけ同じ形式で質問します。

対処:

発展アイデア

  1. **質問文を変えて回答の違いを調べる**
  2. **人間の回答と AI の回答を比べる**
  3. **AI 活用ルールを作る**

安全上の注意

📺 参考動画

▶ 参考動画を検索
🤖 テクノロジーの全テーマを見る

CCN グループの教育・福祉サービス

自由研究の先へ — お子さまの今に合う場所を選んでください。

🏕️ CCN 寺子屋 — まもなくスタート

「自分のスキルや経験を、子どもたちの学びに活かしたい」
そんな先生になりたい大人を、CCN 寺子屋が支えます。
地域で教室を開く・得意を教える・自由研究を伴走する。
受け継いできたものを、次の世代へ。