Квартал напротив храма занимала Красная площадь, в середине 19 века на её месте был основан Общественный сад. Основные участки Знаменского переулка застраивались каменными жилыми домами и лавками в один — три этажа. В 1810-х годах на западной стороне на месте прежних лавок были построены торговые ряды (снесены в 1965 году, в настоящее время на этом месте находится Тверская площадь)[2].
В 1919 году Знаменский переулок был переименован в Свободный[2].