Центром самой большой усадьбы на Соборной площади является дом Скорнякова, известный также как «Воеводский дом», или дом Виноградовых/ Львова. Это здание - «Дом Скорнякова (Львова) XVIII в.» было признано объектом культурного наследия регионального значения в 1968 году.

Старожилы рассказывают, что дом был построен заводчиком Баташевым для касимовского земского деятеля Скорнякова, в знак благодарности за помощь в получении дворянства. Здесь долгое время находился трон касимовского воеводы, перенесённый сюда после упразднения должности воеводы в конце XVIII века, до наших дней трон не сохранился. В 1870-е годы особняк принадлежал губернскому секретарю П.Н.Виноградову, а затем его потомкам Львовым. Немного приземистый основательный дом сложен из кирпичей домашнего производства огромных размеров. Центр главного фасада украшает четырёхколонный портик дорического ордера, увенчанный треугольным фронтоном. Внутренняя планировка была очень сложной и запутанной, узкие лестницы, тайные комнаты. Полукруглое окно под фронтоном выходило на чердак, а с него полупотайной вход вёл в низкие боковые антресоли. К дому примыкали два двухэтажных флигеля. Усадьба занимала весь квартал, спускалась до Никольского оврага. Когда-то тут был целый поселок со всевозможными хозяйственными строениями: домашней ткацкой мастерской, сараем для производства кирпичей, амбарами, складами и другими постройками. Горожане связывали с этим особняком ряд легенд. В одной из них речь шла о подземном ходе, шедшем из здания в сторону Оки. Владельцы сдавали часть дома под трактир, позднее под Земскую управу, а затем Русскому торгово-промышленному банку, который произвел большие переделки. В 1914 г. здесь был открыт лазарет и от внутренней отделки почти ничего не осталось. После революции дом использовался под разные учреждения, несколько лет на втором этаже здания размещался естественный отдел краеведческого музея. Сейчас это жилой дом.

Вероника Цеменкова