退省庵位于湘江东路，是晚清重臣、“中兴四大名臣”“湖南三杰”之一的雪帅彭玉麟故居。房屋坐东朝西，砖木结构，门厅正中悬挂彭玉麟亲笔所书的“退省庵”门额匾牌，门的左右挂着一副对联：“水得闲情，山多画意。门无俗客，楼有赐书。”这是彭玉麟所撰写的对联，寥寥数语，文情并茂，情趣高雅。

　　彭玉麟(1816—1890年)，字雪琴，号退省庵主人，人称“雪帅”，今衡阳县渣江人。有人将他与曾国藩、左宗棠、胡林翼并称晚清“中兴四大名臣”，他创建湘军水师，是中国近代海军奠基人，官至长江水师巡阅使、兵部尚书，封一等轻车都尉，谥号“刚直”。

　　在清朝官场，彭玉麟绝对算是一个特立独行的人物。他一生忠廉刚直，嫉恶如仇，不慕名利，不避权贵，不治私产，曾六次辞官，为世人所罕见。一生坚持“三不”：不要官、不要钱、不要命。他廉洁奉公、不慕名利、担当作为的精神都值得我们借鉴学习。

　　一生六次辞官

　　彭玉麟与曾国藩约定，不要保举他做官，他一生有六次辞官，被传为美谈。

　　1850年，彭玉麟参与镇压李沅发起义有功，被赏赐蓝领顶戴和训导职务，辞去。1861年，因战功显赫，清廷任命彭玉麟为安徽巡抚，并命他迅速带兵北上，消灭苗沛霖反叛势力。彭玉麟以不擅长陆战为由，加以拒绝。1865年，三辞肥缺漕运总督。1872年，彭玉麟入京参加同治帝大婚典礼时，清廷任命他为兵部右侍郎。彭玉麟无意留京，再次选择辞去官职。1881年，清廷任命彭玉麟代理两江总督并兼南洋通商大臣。两江总督在疆臣中的地位，仅次于直隶总督，彭玉麟依旧选择辞去，专注于长江水师和海防的建设。1883年，清廷任命彭玉麟为兵部尚书，彭玉麟再次辞去。当时，恰逢法国加紧侵略越南西南边境告急，清廷命彭玉麟以兵部尚书的身份帮办两广军务，彭玉麟以国事为重，毅然受命南下抗击法军。

　　他最后辞官回乡时，按清朝规定，应得养廉金有两万一千五百余两，可彭玉麟分文不取，全部上交国库充当军费。他将为官三十年的官俸、养廉金、赏赐等几乎全部捐作军费，加起来近百万两。