Строительство Воронежского тюремного замка началось в 1854 году.
Здание было кирпичное, трёхэтажное. Одна половина (1 и 2 этажи) для пересыльных арестантов, третий этаж для женщин.
Вторая половина: оба этажа - общие камеры, 3-й этаж - для военных, привилегированных сословий и одиночные камеры. В Воронежском тюремном замке содержалось до 300 человек, из которых большинство состояло из простолюдинов.
В женском отделении содержалось от 20 до 25 человек,
Коридор привилегированных делился на несколько отдельных камер, больших и малых, в больших помещалось двое-трое, в малых - по одному арестанту. В то время это были не одиночные камеры, существовавшие для экстренных случаев, здесь на день камеры были отперты и желающие ходили из одной в другую совершенно свободно.
В декабре 1860 года при Воронежском тюремном замке открыта Школа для детей и несовершеннолетних арестантов. Они обучались чтению и письму, правилам арифметики, Закону Божьему. В Воронежской тюрьме имелся небольшой участок земли, продукты с которого обращались в пищу арестантов.
Главное занятие арестантов - подённая работа на частных лиц. При тюрьме находилась небольшая библиотека из книг духовно - нравственного содержания. В настоящее время следственный изолятор №1 г.Воронежа представляет собой учреждение
для содержания лиц подозреваемых и обвиняемых в совершении преступлений и состоит из двух режимных корпусов общей вместимостью 1100 человек.