В 1860 году за счёт средств Всевеликого войска Донского был построен Хоперский окружной тюремный замок. На его строительство было затрачено 28 тысяч 888 рублей. В замке могли содержаться 80 арестантов, без одиночных камер.
На жаловании состояли начальник тюрьмы и два его помощника, один по несению караульной службы, другой по хозяйственной части. Караульную службу несли казаки станицы Урюпинской в зачет военной службы. Хотя учреждение относилось к имперскому Минюсту, финансирование на его содержание шло из войсковой казны Всевеликого войска Донского. За нравственной стороной содержания спецконтингента надзирала церковь. Тюрьма строилась со зданием церкви, церковь работала до 1918 года, причём прихожанами были как обитатели тюрьмы, так и обычные граждане.