Дом был построен в XIX века татарскими купцами и промышленников Кастровыми, владельцами мерлушечного производства. До 1917 года усадьбой владей Ахмед Кастров, затем здесь разместился детский дом, потом вплоть до 2012 года здесь работало родильное отделение и женская консультация. Сейчас дом находится в заброшенном состоянии, требует ремонта и восстановления.