Когда Петр Борисович собрался жениться, он выбрал княжну Черкасскую, не уступавшую Шереметеву ни по знатности, ни по богатству. К тому же она была единственной дочерью премьер-министра Анны Иоанновны и Елизаветы Петровны.
Разрешение на свадьбу было получено в 1741 году, но поскольку императрица Елизавета любила собственноручно украшать невест, придворные свадьбы были расписаны на много лет вперед. Князь Черкасский умер, не дождавшись свадьбы дочери, которая состоялась только в 1743 году.
После женитьбы Петр Борисович в одночасье стал одним из самых богатых людей в России: ему принадлежали великолепные дворцы в Москве и Петербурге, необъятные просторы в семнадцати губерниях и более двухсот тысяч крепостных. Была у него и собственная каторга в селе Серебряные Пруды под Тулой.
Петр Борисович был к тому времени генералом, камергером и сенатором, но не любил службы, не хотел он и управлять губерниями. Свое предназначение он видел в том, чтобы воплощать собой дворянские идеалы земного существования.
Он развил бурное строительство в своем имении Кусково, заложив здесь великолепный парк, завел у себя певческую капеллу, отличавшуюся хорошими голосами, и крепостной театр. В этом театре в юности выступали и дети П.Б. Шереметева, Анна и Николай.
Для украшения построенных Петром Борисовичем зданий — голландского домика, эрмитажа, грота — покупались картины, причем для графа главным была не ценность полотна, а его цвет и размер. Картины покрывали стены от пола до потолка и вешались вплотную друг к другу, а если размер картины был больше, чем отведенное для нее место, полотно безжалостно обрезали.
Избранный в 1785 году московским губернским предводителем дворянства, Петр Борисович решил создать портретную галерею, прославлявшую род Шереметевых. Писали портреты в основном крепостные живописцы. Позже он стал собирать портреты вообще, и вскоре его коллекция насчитывала уже около 300 полотен.
Желая удивить современников, Петр Борисович придумывал разные затеи: в горе Улитка устроил пещеру, в которой среди руин драконы изрыгали пламя из крашеной холстины; в парке поставил хижину, где за обеденным столом разместил восковые фигуры в костюмах разных времен; а во врытую в землю бочку усадил раскрашенную гипсовую скульптуру Диогена.
Петр Борисович умер осенью 1788 года, оставив наследником единственного сына, Николая Петровича. Дети Шереметева, Анна, Николай и Варвара, с детства получали основательные знания, их обучали языкам и музыке.
