Vom Portal IV der dem Lustgarten zugewandten Seite des Schlosses geht der Blick über einen fünfarmigen Gaskandelaber zu den Häusern an der Schlossfreiheit. Diese Straßenbezeichnung leitet sich von der vor der Westseite des Schlosses am Spreegraben gelegenen Häuserzeile her, die von der Schloss- bis zur Schleusenbrücke reichte. Auf dem zum Schloss gehörenden Areal siedelte der Große Kurfürst ab 1662 hugenottische Flüchtlinge an, die von der städtischen Besteuerung, Zunftaufsicht und Gerichtsbarkeit befreit waren und nur dem Landesfürsten bzw. seiner Verwaltung unterstanden. Die Häuserzeile wird ab Oktober 1892 niedergelegt, um Platz für das dort geplante Nationaldenkmal für Kaiser Wilhelm I. zu gewinnen.