正所谓赛翁失马焉知非福，彭华当时也许察觉到时势不对，才辞官退引，在辞官获批的后不久，万贵妃去世，宪宗朱见深由于过于悲痛而驾崩。孝宗朱祐樘接任后，彭华为官的好朋友万安等人都受到了追责，刑罚。而彭华由于不贪恋权贵，急流勇退、远离事非，弘治、正德年间与家人一齐隐居，在南方广东罗定州的小乡村，得已安度晚年，所幸大甚。</p>

回乡途中，他先到湖南省南沣暂居，然后再到衡阳短住，之后给经梅岭到达韶关的珠玑巷暂住休憩，之后前往广东探访好友陈白沙先生。他一到广东见到白沙，言谈投机，共同研究，讨论理学，不久他们又双双同游广西桂林、阳朔等名胜、山川。返粤后转入泷州，见其山水秀丽，民风淳朴，决意定居，在泷州之南建起楼房一座，作为安居之所，其楼被后人称为“彭华楼”。</p>

彭华，一生中育有7个儿子，分别为彭勉政、彭勉敩、彭勉肇、彭勉敷、彭勉敬、彭湖生、彭南生，后裔遍布世界各地，聚居地以湖南、江西、广东和广西四个省为主。由于当时特定的历史原因，将已成年的彭勉政、彭勉肇、彭勉敷、彭勉敬四个儿子，留居湖南省开基落业，携黎氏夫人带着年纪尚幼的彭湖生前往广东，会见好友陈白沙先生，并在广东诞下一子彭南生。</p>

彭华，作为明代大学士，对文学有一定的造诣，生平著有诗《三月朔登绝顶》、《自题扇》、《柳鸶为尹嗣昭题》、《夜过胥江》、词《玉蝴蝶》、《浣溪纱》，其著有序、传、题跋、实录、行状、祭文、志铭等多种文学，收录在《彭文思公文集》、《素庵集》。</p></div>