На центральной улице Касимова строили дома, как правило, «лучшие» люди города - торговцы и промышленники. Одна из городских усадеб до революции принадлежала купцам Дьяконовым, она занимала угол Соборной и Большой Мещанской улиц.

До 1840-х годов семья состояла в мещанском сословии, занималась мелочной торговлей. К середине 1860-х семейное дело перешло к Никанору Прохоровичу Дьяконову, который вел крупную торговлю бакалейными, шорными и фаянсовыми товарами. Ему принадлежали пять лавок: одна – в торговых рядах на Соборной площади, две под общественным домом на Соборной площади, и две в собственном доме на улице Соборной.
К началу XX века торговая фирма Дьяконовых была одной из старейших в Касимове, возглавлял её Яков Никанорович, ему же и принадлежал дом на Соборной улице. «Солидная, старинная фирма. Вино-гастрономический, посудно-ламповый и мебельный магазин» - так рекламировали его.
В годы Первой Мировой войны в магазине Дьяконова принималась подписка по сбору пожертвований для бедного населения.
Прошло столетие. Многое изменилось, но до сих пор в бывшем доме Я.Н. Дьяконова идёт торговля, здание входит в комплекс Торгового дома "Виктория" (Кротберс).