Herzog Ernst I. von Sachsen-Coburg-Saalfeld ließ den im Kern mittelalterlichen Bau von 1808 bis 1817 im neugotischen Stil zum Sommersitz umgestalten. Im umgebenden Landschaftspark mit "Schwanensee" und "Prinzenweiher" haben sich u.a. die Orangerie, das Teehaus (heute Parkrestaurant), die Turniersäule (Sonnenuhr) sowie Reste der Eremitage erhalten. Prinz Albert von Sachsen-Coburg und Gotha, der 1840 Queen Victoria heiratete, wurde 1819 auf der Rosenau geboren.