哈里梅根退出皇室后，他们对外表示仍然会保留温莎城堡的Frogmore城堡作为两人回英国时的家，而此城堡是哈里梅根花费纳税人240万英镑装修，因此，两人受到了英国民众的一致批评。
婚礼临近的哈里梅根，请求参加婚礼的来宾，不用给两人买结婚礼物——而是希望他们能捐赠两人精心挑选的7个慈善事业中任何一个。
但是女王，作为哈里王子的奶奶，她无法遵照一对新人的要求去做，她要送给自己的孙子礼物来纪念这个重要的日子。
最后女王将温莎城堡内的Frogmore赠送给哈里梅根。
本来是女王的一片好意，但是结局却并没有那么美好。当哈里梅根和皇室说‘Bye-bye’时，这个女王赠给孙子的礼物反而成了一系列麻烦的源头。
在哈里梅根搬进之前，当时作为皇室高级成员的两人，花费英国纳税人240万英镑的费用将房子翻修一新。
据报道，两人在别墅新安装了一个豪华厨房，并对一间带卧室的工作室进行了翻新，更换了壁炉、地板和楼梯。
frogmore城堡内的主厅
梅根亲自挑选了“环保、无毒、纯素油漆”对房子进行了粉刷，整个工程由一家著名酒店和会员俱乐部设计师Vicky Charles进行监督。
《太阳报》曾在当时询问过哈里王子夫妇的搬迁计划，皇室官员们当时试图淡化成本，称装修费用不到150万英镑。然而工程还没有完成，240万英镑的君主拨款就已经花完，最后的成本将接近300万英镑。
城堡内景
而此次装修中，纳税人的钱仅用于支付厨房、浴室、地板和其他额外的基本费用，窗帘、家具等一些物品，是由哈里梅根个人支付。
更值得注意的是，这件来自女王的礼物——还是19世纪的城堡，坐落于温莎城堡内，也是英国的二级保护建筑——建筑有两层。
在哈里梅根的婚礼之前 ，哈里梅根住在他的单身汉公寓——位于肯辛顿宫内有两间卧室的诺丁汉别墅(Nottingham)。屋内只有一个厕所，而且天花板很低，屋子里还很热，没有空调，花园也是十分小。
诺丁汉别墅
但是在2020年1月，两人宣布退出皇室后，Frogmore城堡为两人带来了不少麻烦。
在‘苏赛克斯皇家’的网页上一份声明中，他们说到：“苏赛克斯公爵夫妇会继续将Frogmore城堡作为两人回到英国的官方住处。”
此后，两人就一直受到外界的批评，此城堡成为两人与女王达成的退出皇室协议中，最为让人头疼的一问题。
女王回应外界关切，明确的表示出走的皇室公爵夫妇，可以继续拥有Frogmore城堡作为两人在伦敦的有纪念意义的住处。
而双方谈判之后，女王正式对外发表回应，她说：“公爵夫妇两人已同意偿还翻修Frogmore城堡的所用费用，所以他们还可以继续拥有此处住宅。”
2020年9月，哈里梅根一次性的还清了Frogmore城堡的翻新费用——240万英镑。
