Przy budowie stojących tam domów wykorzystano starsze relikty murów obronnych.

W związku z przesunięciem się w XVIII wieku na wschód koryta Wisły spichrze znajdujące się pomiędzy ulicami Brzozową i Bugaj nie mogły już dłużej pełnić swych gospodarczych funkcji i zostały przekształcone na budynki mieszkalne. Na przełomie XIX i XX wieku domy traciły historyczny wystrój, zaś brak regulacji dotyczących wysokości budynków sprawiał, że obok siebie stały nadbudowane, liczące pięć czy siedem kondygnacji „niebotyki“.

W 1773 roku utworzono Komisję Edukacji Narodowej. Biura komisji znajdowały się częściowo w domu przy ulicy Brzozowej, ale także w pałacu Krasińskich i w pomieszczeniach przy Bibliotece Załuskich.

W dwudziestoleciu międzywojennym przebudowano dawny spichlerz Strubiczów w dom profesorski według projektu Kazimierza Tołłoczki. W 1944 roku został zniszczony, odbudowano go w latach 1959–1962.

Około 1921–1923 między ulicami Brzozową i Bugaj wybudowano monumentalny gmach mieszkalny Pocztowej Kasy Oszczędności, zaprojektowany przez Mariana Lalewicza.