Следующий старинный дом, расположенный на углу улиц Большакова и Татарской, также принадлежал семье Кастровых. Главным фасадом он выходит на площадь Победы и играет значительную роль в формировании её застройки. Здание имеет довольно богатый декор на всех фасадах. Памятник носит название «Дом купца Хайруллы Кастрова вторая половина XIXв.».
Хайрулла был ещё одним сыном Сайфуллы Мурсалимовича Кастрова, и именно ему он был завещан. До 1917 года дом принадлежал купцу Ахмеду Хайрулловичу Кастрову, которому он перешёл по наследству от отца. Усадьба носила промышленный характер, внутри были производственные постройки, у Ахмеда Кастрова находилось там мерлушечное заведение. Кастровы торговлю своей меховой продукцией в различных городах Российской империи осуществляли через многочисленных представителей. Получая значительные прибыли, они выделяли средства на благотворительность: на содержание Ханской мечети, были членами Касимовского мусульманского благотворительного общества. А.Х.Кастров внес существенный вклад в финансирование строительства Нижегородской городской мечети. Также они являлись попечителями Кастровского медресе в Касимове. Название медресе связано с тем, что с 1868 г. попечителем этого учебного заведения стал Сайфулла Мурсалимович Кастров. После национализации в здании находился детский дом, затем располагалось родильное отделение ЦРБ и женская консультация. С 2012 г. дом опустел, так как роддом переехал в новое современное здание.