Дом купца Н.И. Колоярова построен в 1907 году в архитектурном стиле эклектика. Хвалынск начала XX века нельзя было представить без купцов Колояровых. Родом семья Колояровых происходила из Сызрани. Иван Артемьевич перебрался в Хвалынск и занялся торговлей хлебом. На Острожной улице, на берегу Волги находилась его контора. В 1907 году его сын Николай Иванович построил роскошный дом и покрасил его серебряной краской. Отсюда видимо и название нынешнего отеля «Серебряный век». Это здание очень хорошо просматривалось с Волги с пароходов.
С 1910 по 1914 Николай Иванович был директором городского общественного банка. Купцу Колоярову принадлежали многочисленные амбары для семян подсолнечника. В 1913 году им был запущен маслобойный завод, оснащенный на тот момент по последнему слову техники. Николай Иванович был женат на Матрене Алексеевне и в браке у них родились пятеро детей: Николай, Егор, Нина, Лидия и Константин. Именно с Колояровыми было связано событие, которые называли чудом и диковинкой в Хвалынске — именно Колояровы первыми пригнали в Хвалынск автомобиль!
Когда в стране повеяло революционными переменами, купец с семьей вовремя поняли, как на них могут повлиять такие перемены, и, бросив, всё эмигрировали за границу. Одно время в здании особняка долгое время находилась детская больница, но из-за ее аварийного состояния постояльцы были выселены. Если бы не нашлись добрые люди, то дом, скорее всего пришел бы в полный упадок, как и многие памятники истории, но… его отреставрировали. В 2013 году в Хвалынске появилась гостиница «Серебряный век». Это приятный мини-отель на берегу Волги. Реставрацию здания провели грамотно: и снаружи и внутри. Номеров в отеле немного, и рассчитан он на небольшое количество гостей. Но все номера очень уютные, комфортные, светлые, и в них есть все для полноценного отдыха. Оформлен отель со вкусом. Все чисто и аккуратно. А так как особняк находится буквально на берегу Волги, то можно представить, как приятно сидеть в беседке с видом на Волгу, любоваться ее просторами и пить ароматный чай. В комплекс отеля входит небольшая территория на которой расположилась зона барбекю и просторная баня со всеми традиционными атрибутами.