Центр города – Соборная площадь, от которой  в разные стороны расходятся старинные улицы. Одна из них ведёт к Оке. Это Рязанский спуск; в самом начале  улицы, в месте, откуда открывается замечательный вид на реку, стоит небольшой каменный особняк с мезонином. В списке региональных объектов культурного наследия он зафиксирован как «Дом Гинц», хотя среди его владельцев значатся совсем другие фамилии.

Изначально дом принадлежал представителю известной купеческой семьи – Лукьяну Прохоровичу Якунчикову. Усадьба в начале XIX века занимала половину квартала по Рязанскому спуску. В доме было четырнадцать комнат: девять из них – на первом этаже, и пять – в мезонине. Две боковые каменные пристройки со стороны двора имели хозяйственное предназначение, в одной из них располагалась кухня. Эти пристройки соединялись между собой деревянной застеклённой галереей. Со стороны Рязанского спуска находилась кирпичная стена и ворота. Якунчиковы в первой половине XIX века входили в число крупнейших купцов Касимова. Разбогатели  на питейных откупах; в конце 1820-х годов они совместно с купцами Алянчиковыми содержали откупа по Рязанской, Тамбовской, Воронежской, Орловской, Тульской и Калужской губерниям.
Но Лукьян Прохорович в начале XIX века решил заняться производством и в 1806 году основал в Ковровском уезде Владимирской губернии хрустальную фабрику. В 1814 году на этом предприятии работало 76 вольнонаёмных рабочих, имелись печи для варки стекла. Продукция фабрики - хрустальные графины, кружки, стаканы, рюмки. После смерти Лукьяна Прохоровича дело перешло в руки жены и сыновей. Фабрика Якунчиковых просуществовала до 1840-х годов. Якунчиковы были известны далеко за пределами  Рязанской губернии. Пожалуй, самым знаменитым представителем рода стал племянник Л.П.Якунчикова – Василий Иванович Якунчиков (1827—1907), учредитель Воскресенской бумагопрядильной мануфактуры, один из организаторов Московского Торгового банка, крупный меценат.
Якунчиковым дом принадлежал до 1856 года, затем он перешёл во владение семьи Слётовых, а последними владельцами  стали купцы Азовцевы. В начале XX века здесь размещалось заведение минеральных и фруктовых вод, которое содержала купчиха Павла Сидоровна Азовцева. А фамилия Гинц, скорее всего, связана с тем, что эта дворянская семья снимала здесь жильё.  Ещё в этом доме, по воспоминаниям старожилов,  находился штаб 11-го гренадерского Фанагорийского генералиссимуса князя Суворова полка, дислоцировавшегося в Касимове с 1857 по 1865 год.
Для Касимовского историко-культурного музея-заповедника это здание имеет особое значение - именно отсюда началась история музея: сюда в 1919 году свозились предметы искусства и старины, вошедшие затем в музейное собрание.