Необычна история усадьбы Наумовых. В 2014 году её, уже включенную в план приватизации муниципальной собственности, в последний момент исключили из программы. В оценке значимости здания - экономической или историко-культурной - руководством города предпочтение было отдано последнему. Объект культурного наследия федерального значения "Ансамбль усадьбы городской Наумова XIX – XX веков" был передан для восстановления основателю Историко-культурного комплекса "Вятское" им. Е.А. Анкудиновой Олегу Жарову.
Усадьба построена в 1843 году в стиле классицизма. Кроме главного дома на территории комплекса расположены двухэтажный флигель, складской корпус и каменный сарай. В доме сохранились внутреннее убранство – резные двери, роспись потолка, лепнина. Особняк построен купцом второй гильдии, рыбинским хлеботорговцем Иваном Андреевичем Наумовым. На втором этаже располагались парадные комнаты для приёма уважаемых гостей, убранство дома и росписи потолков уже тогда поражали воображение. Позже в здании находился ломбард, после Октябрьской революции - книгохранилище имени III Интернационала и до последнего времени - городская библиотека им. Ф. Энгельса. По завершению реставрационных работ в 2020 году усадьба вновь откроет двери: здесь разместится музей.
