Архиерейский дом построен в 1829 году к юго-востоку от Благовещенского собора на месте сгоревшего в 1815 году старого архиерейского дома. Сложенный из кирпича двухэтажный дом выполнял функции резиденции высшего православного духовенства.
Строение имеет прямоугольную форму, вальмовую кровлю (четыре ската, торцовые скаты имеют треугольную форму), оштукатурено. С восточной стороны к зданию примыкают три развитых ризалита, расположенных симметрично относительного центрального ризалита, где располагалась домовая церковь. Фасады здания выполнены в формах позднего классицизма.
Вместе с Благовещенским собором и Консисторией составляло обширную архиерейскую резиденцию, обозначенную каменным забором.
Сейчас здание выполняет административные функции.