では、大学入試の小論文にはどのような意味があるのか。
このプログラムは、複雑なテストに合格するための十分な機能を備えているが、学生が大学入試の小論文でアピールすることが期待されている革新性、創造性、批判的思考の代用にはなりえない。最も成功する小論文は、学生のユニークな個性を明確に伝えるものだ。Forbesのエマ・ウィットフォードが示したように、ChatGPTは明確な指示を出せば、わかりやすい小論文を作成できるが、作成された小論文にはトップ校にアピールするための想像力が欠けている。
シカゴ大学の「アンコモンエッセイ」プロンプトは、ChatGPTが人間の推論を行うことができないことを物語っている。このプロンプトは、学生に創意工夫と独創性をもってトピックにアプローチするよう求めている。過去に最も悪名高いプロンプトの1つは、単に「xを求めよ」というものだった。このプロンプトをChatGPTに直接入力すると、プログラムは標準的な説明を提供した。「xは任意の数または数式を表すことができる変数です。通常、方程式で解かなければならない未知の量を表すのに使われます」
より具体的な指示を出しても、プログラムはユニークで真に創造的な回答を作成することができなかった。「xを求めよというプロンプトに対してクリエイティブなエッセイを書け」と指示すると、このようなエッセイが作成された。
「高校3年生の夏、私は何か特別なものを発見しようとしていた。この数カ月、私は数学と物理学を学び、好奇心旺盛な人だけが理解できるような熱心さで、あらゆることを吸収していました。ある日、先生から『xを求めよ』という課題が出されました。それは、いくつもの複雑な問題の答えを解き明かす方程式でした。
最初は、その課題に圧倒されました。まるで干し草の中から針を探すような気分でした。しかも、それはとても重要だったのです。しかし、科学者として成功するという夢を叶えるためには、xを見つけなければならないと思いました。ライオンに匹敵するほどの強い意志を持って、私は仕事に取りかかりました。
教科書を何度も読み直し、虫眼鏡で1つ1つの数式や概念をつぶさに見ていきました。行き詰まったり、間違った方向に進んだりしながらも、決してあきらめずに、いろいろな方法を試してみました。しかし、xを見つけると決意していました。