Брак и дети
Будучи человеком очень богатым (12 тысяч душ), князь Голицын увеличил ещё своё состояние женитьбой в 1790 году на царевне Анне Александровне Грузинской (1763—1842), дочери гвардии капитана царевича А. Б. Грузинского от брака с княжной Д. А. Меншиковой; внучке последнего грузинского царя Бакара Вахтанговича и светлейшего князя А. Д. Меншикова. В первом браке с 1785 года была за полковником Александром Александровичем де Лицыным (1760—1789), погибшем под Очаковым, побочным сыном вице-канцлера князя А. М. Голицына. Княгиня Анна Александровна, умная, добродетельная и хозяйственная, пользовалась всеобщим уважением и играла большую роль в высшем свете под именем «княгиня Борис». Её письма, рисующие петербургское общество конца царствования Екатерины II, были напечатаны в «Историческом Вестнике» 1887 года. В браке родилось 3 сыновей и 5 дочерей:
Елизавета Борисовна (1790—1870), с 1808 года супруга сенатора князя Б. А. Куракина (1783—1850). Отличалась религиозностью и перешла в католичество. В минуту религиозной экзальтации сожгла себе руку на жаровне, вследствие чего пришлось сделать ампутацию. Умерла в умопомешательстве.
Андрей Борисович (1791—1861), флигель-адъютант, генерал-майор, масон, председатель комитета ланкастерских школ. После доносов о масонском заговоре, помещен для расследования в Кегсгольмскую крепость в январе 1831, где находился четыре месяца. Затем выслан из Москвы в 24 часа, удален от службы, жил под надзором полиции в Курской губернии, Новом Осколе, Владимирской губернии. С 1841 разрешено жить, «где пожелает», кроме Москвы и Петербурга. Разорился откупами. Первым браком был женат на Нине Фёдоровна Ахвердова (1805—1828), дочери генерал-майора Ф. И. Ахвердова; вторым (с 1853) — на Варваре Сергеевне Шереметевой (1815—1881), дочери С. В. Шереметева.
Александр Борисович (1792—1865), адъютант великого князя Константина Павловича, Саратовский и Владимировский губернатор, мемуарист и масон. Был женат с 1817 года на дочери В. С. Ланского фрейлине Анне Васильевне Ланской (1793—1868), их единственная дочь Зинаида (1818—1845) была замужем за камер-юнкером графом К. К. Толем (1817—1884), сыном известного участника Отечественной войны 1812 года генерала К. Ф. Толя.
Николай Борисович (1794—1866), полковник, участник войны 1812 года; переводчик, военный историк и музыкант, виртуоз-виолончелист, покровитель Бетховена.
Софья Борисовна (1795—1871), фрейлина и кавалерственная дама, была замужем с 1818 года за генерал-лейтенантом К. М. Полторацким (1782—1858). В книге «Россия в 1839 году» ярославская губернаторша рассказывает маркизу де Кюстину, что её воспитала подруга его бабушки, приехавшая во время революции в Россию вместе с семейством герцогини Полиньяк.
Александра Борисовна (1798—1876), фрейлина, с 1820 года замужем за генерал-майором князем С. И. Мещерским (1799—1870).
Татьяна Борисовна (1797—1869), статс-дама, известная благотворительница, с 1816 года супруга действительного тайного советника А. М. Потёмкина (1787—1872).
Ирина Борисовна (1800—1802)