其西南方的另一座“女人石城堡”,也早已不复存在。剩下的两座称为“前高天鹅堡”和后高天鹅堡,就在新天鹅堡所在的位置上。
路德维希二世决定在此地兴建他的“梦幻城堡”,因此下令将前后高天鹅堡的废墟炸掉,清除前后天鹅堡废墟后在原址兴建新天鹅堡。
新天鹅城堡的建立者是巴伐利亚的一个国王,路德维希二世。这个国王无治世之才,却充满艺术气质。他亲自参与设计这座城堡。里面有大量德国天鹅雕塑。他梦想将城堡建成为一个童话般的世界。由于白色城堡耸立在高高的山上,其四周环山和湖泊。所以一年四季,风光各异。
新天鹅岩城堡的名字来源于中世纪,关于天鹅骑士的传说,这座白色的经常云山雾笼的建筑只有100多年的历史。