オリジンサーバーが複数ありますが冗長化は可能ですか

可能です。オリジンサーバー用のDNSレコードを複数記載いただければ、エラー時自動的に別のIPアドレスに再リクエストが行われます。