Das Schloss wurde durch die Grafen von Königsfeld erbaut. Es war im Laufe der Zeit im Besitz verschiedener Adelsfamilien wie Montgelas oder Thurn und Taxis. Ab 1926 war das Schloss mal Schule, mal Lazarett.
Heute wird das Schloss als Priesterseminar der Priesterbruderschaft St. Pius X. genutzt. Dort wohnen Patres und Seminaristen (= Priesteramtskandidaten). Im Schloss werden auch Priester-Weihezeremonien abgehalten.