Жена — Ульяна Михайловна Деева (1791—1838), фрейлина двора, дочь суворовского полковника М. И. Деева.

По свидетельству современника, генеральша Ламберт, сильная духом костромичка, во время переправы через Березину 11 ноября 1812 года сумела остановить несколько гусаров своего мужа, бросившихся было бежать от французов, она говорила им по-русски: «Дети, неужели вы оставите вашего раненого генерала?» Несколько гусаров спешились и понесли на плечах своего генерала, а четверо конных, ведя в подводу лошадей товарищей, поехали вперед и расчищали дорогу раненому».

За заслуги мужа 22 августа 1826 года была пожалована в кавалерственные дамы ордена Св. Екатерины (малого креста). Летом 1831 года проживала в Царском Селе, где была знакома с Пушкиным.

По словам А. О. Смирновой, поэт «прибирал всякую чепуху насчет своей соседки — генеральши Ламберт, которая жила в доме Олениной против Пушкина и всегда дичилась его; узнавши, что Варшава взята, уведомила его об этом. Когда Пушкин напечатал свои известные стихи на Польшу, он прислал ей первый экземпляр». За увесистую комплекцию поэт звал её «мадам Толпега».

Дети:

Александра (1808—1834), 

Иосиф (Осип) (1809—1879; генерал от кавалерии),

Пётр, Карл (1815—1865; генерал от кавалерии, участник Кавказских походов, член Государственного совета),

Мария (1816),

Елизавета (1817—1838)

Екатерина (1820—1838).