Здание музея, являющееся памятником архитектуры XVIII - середины XX вв., нуждается в настоящее время в проведении комплексной реставрации. Фасад дворца и планировку парадной анфилады можно восстановить по недавно выявленным архивным документам. Усадебная композиция, заложенная в конце XVIII в., не была нарушена многочисленными наслоениями XIX-XX вв. - пристройки скрываются за главными корпусами. Архитекторы отводили новым зданиям заведомо подчиненную роль, оставляя первенство за усадебными сооружениями, не нарушая, а дополняя сложившийся ранее ансамбль.
Таким образом, дворцовый комплекс с двухсотлетней историей, переживший пожар 1812 г. и революцию 1917 г., многократно перепланированный, но поддающийся восстановлению, вправе сегодня носить имя Дома графа Остермана.