让温莎堡举世闻名的，应该就是爱德华八世“不爱江山爱美人”的故事。就是在温莎堡，爱德华八世遇到了辛普森夫人，并不可救药的爱上了她，但有过两次婚姻的美国平民辛普森夫人显然不能为王室所接受。一心要与爱人长相厮守的爱德华八世不得不于1936年宣布退位，并携妻子离开英国。此后，他虽被继位的弟弟乔治六世封为温莎公爵，但实际上，他再未踏上英国土地。直到1972年，爱德华八世辞世，他的灵柩才得以回国，安葬于温莎堡。多年后，温莎公爵夫人在法国逝世，遗体也被运回温莎，与爱德华合葬，英国王室最终承认了这对深情的伴侣。