這座城堡即使是在當初建造的時候，也不適合居住。不過由于它壯觀美麗及高貴的氣質，它被稱為是“最接近童話的地方”。路德維希二世也因為他的城堡，而被后人們稱做是“童話國王”。這位國王敏感而脆弱，心中充滿著浪漫卻又不切實際的想法，對現實的憎惡，對人民的失望，加上無法抑制同性戀癖好而不斷自我折磨，使他只有沉溺在夢和美學虛幻的世界中。他先后修建了新天鵝堡，林德宮和基姆湖城堡，想要通過修建城堡來實現他心中的夢幻，盡管這些城堡一點都不實用。終于，大臣們不愿再出資籌建城堡，他們授意一個由4人組成的醫務小組宣布路德維希二世精神錯亂，并將他罷免，放逐到施塔恩貝格湖的貝格城堡。1886年6月13日晚上，路德維希二世和他的醫師一起溺死于施塔恩貝格湖中。