Красивый замок с ажурной чугунной оградой был построен в 1911 году для купца Тихона Филипповича Булычёва архитектором Иваном Аполлоновичем Чарушиным. Особняк является образцом готической архитектуры, привлекая взгляд строгими двуглавыми орлами на фасаде и свободно поставленной на углу здания башней.
Сам архитектор Чарушин очень гордился своим детищем, поместив изображение «дома-дворца» на стену своего кабинета.
В начале XX века это здание поражало кроме внешнего внутренним убранством: на всех этажах находились ванны с душами и водяное отопление с регуляторами тепла на батареях, а также были проведены электричество и телефон — настоящая роскошь для того времени. Царскому интерьеру особняка с мозаичными полами и роскошной широкой лестницей мог позавидовать любой дворец. В доме действовал лифт.
Купец Тихон Филиппович Булычёв строил особняк для своей дочери, но впоследствии продал его городу.
В 1915 году в особняке размещался приют инвалидов и сирот им. Т. Ф. Булычёва.
После революции здесь находился штаб III армии Восточного фронта, а затем — ВЧК (НКВД, КГБ).
Сегодня здание принадлежит Управлению ФСБ по Кировской области.