เฉลิม อยู่บำรุง
สมรสกับลำเนา อยู่บำรุง ผู้พิพากษาสมทบศาลเยาวชน มีบุตรด้วยกันทั้งสิ้น 3 คน เป็นชายล้วนคือ ร้อยตำรวจตรี อาจหาญ อยู่บำรุง[4], ร้อยตำรวจตรี วัน อยู่บำรุง และ [5] ลูกชายทั้งสามก็ถูกเรียกกันทั่วไปว่า "ลูกเหลิม" มีน้องชายที่เล่นการเมืองท้องถิ่น เป็น ส.ก.หลายสมัยคือ นวรัตน์ อยู่บำรุง ส.ก.เขตหนองแขม และน้องชายที่เป็นตำรวจ พ.ต.ท.จารึก อยู่บำรุง ซึ่งเสียชีวิตแล้วเมื่อวันที่ 9 ธันวาคม พ.ศ. 2557
ลิซ่า ไปรพิศ
อุมา ไพบูลย์พันธ์ เป็นที่รู้จักกันดีในชื่อ ลิซ่า ไปรพิศ ชื่อเล่น ลิซ่า (เกิดปี พ.ศ. 2519) เป็นนักแสดง นักร้อง นางแบบ และนักมายากลชาวไทย และเป็นภริยาของเฉลิมสวรรค์ ไพบูลย์พันธ์