Falkenstein est situé à 1.268 mètres d'altitude et représente la ruine la plus élevée d'Allemagne.  Le château fort fût construit en 1059 pour servir de forteresse à l'Evèque d'Augsburg.  La petitesse de la construction et le nom donné peuvent s'expliquer par le fait que la forteresse fut construite par l'Evèque. Il voulait l'utiliser comme repère de chasse autour des environs de la montagne Falkenstein (Rocher de l'Aigle).  Avec l'établissement de l'intendance (Vogtei) en 1310, Falkenstein fut utilisé comme bureau pour les fonctionnaires installés là. A partir de ce moment, Falkenstein cessa d'être "résidence d'été".  Depuis la fin du 16ème siècle, aucun fonctionnaire ne fût envoyé et le château tomba en ruines.

Louis II porta attention aux ruines du château.  La beauté romantique l'intéressa vivement et il adorait les promenades au clair de lune d'où il pouvait admirer la beauté de son pays.  Un nouveau château aurait dû être construit et en 1885 la mise en place de canalisations d'eau avait commencé. Malheureusement, le château ne restera qu'un rêve après la mort du roi en 1886.