В английском пейзажном парке Гай располагалось множество самых разнообразных павильонов, ни один из которых не сохранился до наших дней. Одним из знаковых для Кускова павильонов парка Гай была Портретная галерея. Граф Шереметев составил ее из портретов «славных особ» разных времен и стран. Признанием заслуг П.Б. Шереметева в этой области стало избрание его «почетным художеств любителем Академического собрания», состоявшееся в 1766 году.
Для Портретной галереи в кусковском английском парке к 1785 году было выстроено специальное здание, которое, в XIX веке было разобрано, а портреты перемещены во Дворец и павильоны. Практически полностью сохранившаяся кусковская Портретная галерея стала уникальной концентрацией портретного искусства XVIII века и на сегодняшний день остается единственной целостной коллекцией в ряду некогда существовавших подобных усадебных собраний.