PS5版のFF14を購入したので、PS4版を削除しても大丈夫ですか？

はい、大丈夫です。PS5版のFF14を購入すると、自動的に古いPS4版を削除することができます。また、プレイヤーが自分の古いPS4版を手動で削除する場合もありますが、それも問題ありません。