Anthropic社は、AIアシスタント「Claude」を安全で信頼できるものにするため、「憲法的AI(Constitutional AI)」という新しい方法を開発しました。これまでのAI開発では、人間が出力結果を評価して改善していましたが、この方法は手間がかかり、効率が悪いという課題がありました。憲法的AIは、AIシステムに明確な行動指針(憲法)を与え、その原則に基づいてAI自身が判断するようにするものです。これにより、人間が不快な内容を見る必要がなくなり、AIの価値観が透明で調整しやすくなります。Claudeの憲法は、国連の人権宣言、大手企業のサービス規約、他の研究機関の提案など様々な源から作成されており、有害な出力を減らしながらも有用な回答を提供できることが確認されています。