Основное здание Великоустюгского музея – дом купца Г.В. Усова расположен на Набережной города. Двухэтажный каменный особняк в стиле классицизма был построен в конце ХVIII века. За свою долгую историю дом сменил несколько владельцев и претерпел изменения в архитектурном облике.

В начале 1930-х годов «чудный барский усовский дом», как называли его горожане, был передан музею. В настоящее время здесь развернуты экспозиции отдела истории и художественного отдела музея–заповедника.