Первой колокольней в Каргополе, возведенной в камне в 1767–1778 гг., стала Соборная колокольня на центральной площади. Строилась она на деньги, выделенные из казны, вместе со всем городом, пострадавшим от великого пожара 1765 года.
Квадратная в плане трехъярусная башня, увенчанная высоким шпилем и золоченым крестом, служит не только звонницей, но является ключевым архитектурным объектом в линейной планировке Каргополя, его высотной доминантой. От неё начинается улица Ленинградская (ранее Санкт-Петербургская), задуманная как главная городская магистраль и выходившая на транзитные сухопутные пути, связывавшие Каргополь с Петербургом, Москвой, Архангельском, Петрозаводском. Этим-то и объясняется расположение главного фасада и ориентация креста не по оси запад-восток, а строго на эту улицу.
Центральный фасад строения украшает вензель Екатерины II, и сама Соборная колокольня является памятником императрице, по указам которой выделялись средства на возобновление Каргополя.
Каргопольскому музею официально передана в 1997 году.