Во время Второй Мировой Войны планировалось, что король Англии Георг VI, его жена королева Елизавета, и их две дочери, принцессы Елизавета и Маргарет будут проживать в Канаде. Именно Замок Хэтли должен был стать их домом на время военных действий. Однако в итоге было решено, что это будет слишком большой удар по морали государства, и семья осталась в Лондоне. Когда планы по использованию замок в качестве королевской резиденции провалились, здание было передано в пользование военно-морскому учебному центру. Он был закрыт в 1995 году и с тех пор замок и его территория является национальным историческим объектом. Находящийся рядом Парк Хэтли разрабатывался десятилетиями, и сегодня представляет собой несколько взаимосвязанных садов, выполненных в разных стилях. Наиболее известные японский, итальянский и розовый сад. На протяжении нескольких поколений за парком приглядывает семья садовников, с которыми можно поговорить о прошлом замка и его постояльцах.