В итоге на Павловской улице появилась каменная двухэтажная церковь с тремя престолами: во имя Казанской иконы Божией Матери, Всех Святых и Святого Петра, архиепископа Александрийского. После революции службы продолжались, в 1927 году церковная община храма насчитывала более сорока человек. В 30-е годы решением Мособлисполкома церковь Казанской иконы Божией Матери была закрыта, здание использовалось под столовую.
В годы советской власти в храме размещался Дом пионеров и районное управление по борьбе с организованной преступностью. Впоследствии помещение храма арендовали разные организации.