在保定任职不满半年,胡文璧又调任天津兵备道副使。之后他曾三次上奏章辞官,想急流勇退,全都不被允许。不久,他冒着极大的危险,上《禁革皇庄疏》(皇庄是明代皇室直辖的田庄),果不其然,触怒明武宗朱厚照,被锦衣卫拘捕,受尽苦楚。出狱后,贬谪为延安府检校。嘉靖元年(1522年),明世宗继位,又重新起用他为四川按察使,但未上任就病逝,时年五十七岁。著作有《文会录》《耒阳遗迹》《耒阳十景诗》。
(本报记者翟瑜根据市志办提供的资料整理)