Der Ursprung des Kaiserhofes sind zwei Patrizierhäuser, die zeitgleich und parallel im Jahre 1898 gebaut wurden.

Jedes Haus verfügte über je drei Wohnungen zur Größe 295 qm. Im Dachgeschoss brachte man in Kammern das Gesinde unter, im Keller Heizmaterial, Vorräte und sonstiges Hab und Gut. Bis hin zum 2. Weltkrieg wohnten Senatoren, Kommerzienräte und andere Personen von hohem Stand mit ihren Familien in den schönen und erhabenen Häusern an der Allee auf dem Wege nach Kronsforde.

Mit den Kriegswirren und der eintretenden Flüchtlingswelle wurden die Wohnungen konfisziert und in kleinteilige Behausungen verwandelt. Die letzten Flüchtlinge verließen 1964 die inzwischen nahezu baufälligen Objekte. Ein Jahre später erwarb der Flüchtling aus Ostpreußen Helmut Klemm, seinerzeit als Groupier im Casino Travemünde tätig, das Haus Nr. 13, welches heute als „Westflügel“ bezeichnet wird.