本研究では、法律分野におけるChatGPTの性能を実験を通じて評価しています。ChatGPTの結果を、正規表現（Regex）によるベースラインと比較しており、人間のパフォーマンスとの比較だけに焦点を当てていません。結果として、ChatGPTは必要な知識や能力にアクセスできても、それらを組み合わせて合理的に推論し、包括的な結果を導くことができないことが明らかになりました。法律分野での重要なタスクは、法的決定を読み、法律の原則から重要な部分を抽出することですが、AIはこのタスクに対して全体的な理解と推論能力を欠いています。このことが、AIの限界を示しており、真の知性は依然として人間だけの特性であることが示されています。