Башня была построена за алтарём деревянной церкви (сожжена в 1611 г.), построенной преподобым Авраамием Смоленским. При постройке башни под фундаментом стены была сооружена галерея («слух»). В 1609 г., во время первого штурма поляков, башня сильно пострадала; в 1611 г. во время вторго штурма её деревянные конструкции выгорели полностью. В 1633 г. была одним из объектов, на которые нацеливались основные удары войска Шеина. К ней сапёрами были выведены подземные ходы. В 1706 г. башня была защищена земляной насыпью.