«Дом уединения», построенный в конце 1770-х – 1780-х годах в пейзажном парке Гай, был предназначен для графа и его семьи на время их пребывания в усадьбе.
Дом уединения представлял собой одноэтажное деревянное здание на каменном фундаменте, экстерьер которого отличался лаконичным решением в духе раннего классицизма. По главной линии фасада располагалось одиннадцать окон, каждое из которых украшали нарядные резные полотенца и миниатюрные «балюстрадки».
Несмотря на приватный характер Дома уединения, внутреннее убранство его интерьеров отличалось богатством и изысканностью. Бронзовые фонари, бра и торшеры, произведения живописи и графики, изделия из фарфора и бисера служили украшением Дома. В «Кратком описании села Спаскаго Кусково тож» особо отмечалось, что дом «убран по приличности упоминаемаго названия».