Усадьба Смирновых была построена в 1870 году Николаем Петровичем Смирновым. Его сын, Павел Николаевич, избирался городским головой и пробыл им до самой революции. А внук, Николай Павлович, был известным писателем, который восхвалял Плёс в своих стихах и произведениях.
До конфискации советскими властями, дом был оживленным местом, в нем часто устраивались приёмы. Комнаты были прекрасно обставлены, с зеркалами, коврами, красивыми статуэтками. В 1929 году дом конфисковали и передали дому отдыха "Плёс" - в нём разместилась администрация. Семью переселили в квартиру с ящиками вместо мебели. В наши дни дом Смирновых заброшен, реставрация не планируется, но местные жители хотели бы видеть в этом доме музей, посвященный писателю Николаю Павловичу Смирнову.
Из стихов о Плёсе
В родных местах,
как в теплом отчем доме,
Опять брожу вечернюю порой,
И тихо кланяюсь и церковке на всхолмье,
И русской дали нежно-голубой,
И полевому чистому простору,
И васильку на желтой борозде,
И дальнему таинственному бору,
И одинокой северной звезде.
На тихой Волге, под закатным светом,
Плывет буксир, раскатисто трубя.
На родине печальным поздним летом
Встречаю вновь далекого - себя...