Принц Хари не ще отседне в Бъкингамския дворец поради просрочен отговор на предложението на крал Чарлз.