段祺瑞和當時其他軍閥一樣，也討了幾房姨太太。當時的第四位姨太太，一進門就愁眉不展，原來她已經有了意中人，段祺瑞便吩咐他妻子要像嫁女兒一樣，成全她和意中人的婚事。段祺瑞讓姨太出嫁的事，在當時傳為佳話。

段祺瑞一生沒有不動產，這在民國初年的軍閥政客中是絕無僅有的。段祺瑞在北京一直是租著房子生活，直到袁世凱以送套房子給他義女的名義(段祺瑞在原配夫人 過世后，娶了袁世凱的養女張氏為妻)，給了段家一棟房子。這棟房產的原房主是與袁世凱打牌輸了40萬大洋，才把房子抵押給袁世凱的，可沒給房契。等袁世凱 一死，房主兒子拿著房契來找國務總理段祺瑞，要收回房子。段祺瑞見人家手中有房契，二話沒說，帶著一家人搬了家，這棟房子只住了兩年。

段祺瑞曾經是全中國的軍政首腦，大權在握，自然不缺人給他送東西。但是他從來不收禮，只是遇見最親近的下屬和友人送來禮物、卻之不恭時，才會在禮物中挑選 一兩樣最不值錢的東西留下，余者則悉數退還。當時的江蘇督軍、后來成為漢奸的齊燮元曾送給段祺瑞一件幾扇鑲嵌著各種寶石的屏風，五光十色，非常惹眼。段祺 瑞的家里人都喜歡得不得了，都盼望段能留下這件寶物。誰知第二天再看，寶物不見了，原來段祺瑞一早就派人將屏風歸還給了齊燮元。

只有一次例外，段祺瑞將別人送的禮物照單全收，那便是馮玉祥送來的一個大南瓜。1926年6月，段祺瑞欠黎元洪7萬元，后因無力償還被黎告上法庭，這件事足可說明段祺瑞在執政期間確實是一名清廉的官員，沒有多少家財。

中國數千年家天下和世襲傳統的熏陶，使得位高權重的官員總想要蔭及子孫。“一人得道，雞犬升天”的現象在中國歷史上已是屢見不鮮，但是在段祺瑞這里卻是個例外。

段家家規很嚴，夫人和姨太太都不準干預公事。有一位姨太太想替老媽子的親戚謀個差事，段祺瑞立即氣歪了鼻子(段祺瑞在生氣時鼻子會歪)，表示自己不會做出賣官鬻爵的事情。

段祺瑞的兒子段宏業從小寄養在親戚家，十幾歲才回到段祺瑞身邊，小時候由于缺少良好的教育，所以文化水平不算高。不少人勸段祺瑞給兒子在政府部門安排個職 位，段都沒有答應，在他看來自己的子女們應該靠自己，從最底層做起，一步步上升，不能一下子就做官。胞弟段祺甫來京城求大哥給自己找個官做，段祺瑞也是一 口回絕，給了他一些錢回去做買賣。

段祺瑞在下臺之后，經濟來源減少，為了節省開支，段祺瑞一改從不管家的習慣，親自過目家中每日的賬目。為了減少開銷，段祺瑞在英租界47號路租了一套費用 較少的住宅。喬遷之后，他連平日里十分喜歡的麻將也不打了，一日三餐都以米粥、饅頭、素菜為主，四季均著布衣。公館的規模也縮小了，廚房里人也少了，當差 打雜的加上看門的，不過十來個人，原來太太小姐們每人屋里三四個老媽子也壓縮到一兩個。直到后來，除留下繼妻張氏在身邊外，其他姨太太都遣返回合肥老家， 以減少開銷。

家里時常出現揭不開鍋的窘困局面，多虧段祺瑞的一些老部下自愿輪流為段站崗放哨，幫助處理些雜務，這才使得公館中不至于到了黃葉滿階無人掃的地步。