故居位于乌石峰麓的彭家围子，总面积350平方米，原为几间茅屋，1925年故居实在无法居住，1925年至1927年，在湘军担任连长、营长时的薪金，由胞弟金华、荣华所建，故又名“三华堂”。故居座西北朝东南，砖木结构，粉墙黛瓦，是投身革命后在乡唯一长时间活动的场所。1958年、1961年两度回乡考察。1961年，在此共居住了34天，接待来访干部群众2000余人，并在故居拟写了5份农村调查材料交党中央参考。故居西厨房是埋藏彭总1962年给党中央“八万言书”手稿的地方，同时故居也是大弟金华创建中共彭家围子地下党支部的主要活动场所。

　　1980年至1983年，湘潭县人民政府对故居进行维修，并加砌保护性的石围墙；1982年，题字“彭德怀同志故居”，1983年8月1日正式对外开放，同年10月10日，湖南省人民政府公布为省级重点文物保护单位；1995年被列入湖南省首批爱国主义教育示范基地；1998年，对故居进行全面维修，复原彭德怀1961年回乡调查时的情形；2001年6月25日，国务院公布为第五批全国重点文物保护单位。