ChatGPTとGoogle検索、学習効果はどちらが高い？ 8日間の実験が示す結果

2019年から続く本連載「Innovative Tech」は、世界の最先端研究論文を独自の視点で厳選し解説する。執筆は研究論文メディア「Seamless」を主宰する山下氏が担当し、イラストや漫画は同メディア所属のアーティスト・おね氏が手掛ける。Xアカウントは＠shiropen2。

米ジョージア工科大学やミシガン大学などの研究者らが発表した論文「Learning by Chatting? Investigating the Impact of Generative AI on Information Seeking and Learning」は、AIチャットボットと検索エンジンの学習効果を比較した研究報告である。

生成AIの普及に伴い、調べ物の方法は検索エンジンでのキーワード検索からチャットボットへの質問へと移行しつつある。この変化が学習にどう影響するかを調査するため、研究チームは「栄養と食事の計画」をテーマにした比較実験を実施した。

参加者80人（最終的に35人が完了）をChatGPTグループと従来のGoogle検索グループに分け、8日間の学習を行わせた。なおGoogle検索ではAIによる要約機能を無効化した状態で実験を進めた。

実験の結果、ChatGPTを使用したグループはGoogle検索を使用したグループよりも学習効果が低い傾向が明らかになった。特に、学んだ知識を応用する力や複数の情報を比較評価する能力で顕著な差が表れた。

ChatGPTグループの学習効果が低かった背景には、生成AIならではの情報の偏りとユーザーの行動変化という2つの要因が関係している可能性が指摘されている。

第1に、ChatGPTは基礎的な仕組みよりも完成された成果物を優先して出力する傾向がある。例えば「バランスの良い食事とは何か」と調べた場合、Google検索では栄養素の適切な割合やその根拠を解説する記事にたどり着きやすいが、ChatGPTはいきなり具体的な献立案や買い物リストを提示しがちだった。手軽に解決策を得られる半面、原理原則を学ぶステップが省略されてしまう。

第2に、対話型の画面はユーザーの視野を狭め、情報を精査する行動を減少させる。

ChatGPTを使うと、ユーザーは「自分に合った食事は？」といった狭く個人的な質問から調べ物を始める傾向が強まる。

また、AIが簡潔に要約した一つの答えを返すため、ユーザーは複数のWebサイトを比較して信頼性を確認したり、別の視点を探したりする手間を省いてしまう。その結果、与えられた情報をそのまま受け入れる受け身の学習に陥りやすくなる。

皮肉なことに、検索をAIに任せて楽になるはずが、ChatGPTを使った参加者は学習過程でむしろフラストレーションを感じていた。自分が望む詳細度や形式で情報を得るために質問の仕方を何度も工夫する必要があり、自分のペースで情報を取捨選択しながら進められない点に不満を抱えていた。