У собора непростая судьба: в 1935 году на его месте собрались строить здание НКВД, собор взорвали. Позже на его месте был фонтан с фигурой оленя, окружённый сквером. И только в начале 21 века собор воссоздали на прежнем месте, но сквер с оленем оставили.