三公祠为彭刚直公祠、杨勇悫公祠、李勇恪公祠。三祠相临，均建于采石。合称“三公祠”。
 
      彭刚直公祠为清代重臣彭玉麟专祠，原在太白楼左侧。彭玉麟，字雪琴，湖南衡阳人。早年追随曾国藩创办湘军水师，并多次与太平军作战，为清廷所赏识，累官至兵部尚书，卒谥刚直。彭玉麟生前酷爱采石山水，每年巡阅，必来此游览。光绪十三年（1887年），李成谋曾奉敕建彭玉麟生祠于采石。光绪十六年（1890年），彭玉麟卒，光绪帝下旨在彭玉麟家乡及立功省份建立专祠，以彰其绩。专祠由当时长江水师协镇谢浚畲督工建造，历时五个月而成，东西长20丈，南北宽50丈，整座建筑耗费白银1.5万两。
 
     据采石旧志载，彭公祠屋宇宏伟，气象轩昂。大门外有石狮一对，高约2米，庄严威武。大门两侧各设一小门，门楣题额为“江涛涌雪”、“山势凌云”。入内即见“东南砥柱”四字匾额，为两讲总督曾国荃题。两廊下匾额甚多，如“军民感戴”、“天鉴孤忠”等等，大多为彭氏门生所题。登上数十级石阶，步入殿堂，中供一座祭坛，坛上设有木龛，龛中立有彭玉麟牌位，高约三四尺，上书“太子太保兵部尚书一等轻车都尉谥刚直彭公讳玉麟之神位”。牌位前是大理石香炉，炉径一尺余，高约七八寸，色泽艳丽。殿堂内横匾众多，大都是歌功颂德之作。两壁悬有“忠、孝、节、义”四个木框。由殿后拾阶而上，有平房三间，为储放祭器之所。再后有滴翠楼、凝青阁、琴舫、粹然亭、吟香馆、萃芳园、迓曦庐、仙侣斋、红杏轩等古建筑。祠内林木苍翠挺拔，假山玲珑剔透，有月牙池，清澈见底，游鱼可数。
 
     彭公祠落成后，又购置邻近荒熟田计1635亩（耗银4853两）作彭公祠田产，以供香火和岁修之资。清时，地方官吏每年春秋两季均前往举行祀典。至民国初期，因年久失修，已破败不堪，加上屡次为军队所占驻，其中建筑物及陈设被劫掠毁坏。后以其址改建刚直中学。建国后，改作市第一中学校办工厂及教工宿舍。1982年，一中另迁新址，市有关部门拨专款进行修复，旧貌得到部分恢复，今为李白纪念馆。
 
      杨勇悫公祠，为清代将领杨岳斌专祠，原在彭公祠与李公祠之间。杨岳斌，原名杨载福，字厚庵，湖南长沙人，善书，曾与曾国藩、彭玉麟等一起创办水军，拔为营官，后累升至总兵，兼署湖北提督。多次与太平军作战，官至陕甘总督，同治五年（1866年）因病免职。光绪九年（1883年），中法战争爆发，杨岳斌被重新起用为帮办台湾军务，与刘铭传一起，率军抗击法军，粉碎了法军夺占台湾的计划。光绪十六年（1890年）卒，谥勇悫。
 
      光绪十七年（1891年），清廷下诏在采石建杨公祠。祠西堂下为横秋馆，为昔日李成谋讲学处。南屋廊下有四快石碑，高约四尺许，嵌入壁中，碑上镌刻有李成谋诗。民国年间，祠毁坏，今已不存。
 
     李勇恪公祠，为清代将领李成谋专祠，原在杨公祠左侧。李成谋，字与吾，湖南湘乡人，早年随曾国藩创建水军，后为杨岳斌部将，长期与太平军作战，官至长江水师提都。光绪十八年（1892年）卒，谥勇恪。光绪帝下旨在其原籍及立功省份建立专祠。民国时期，祠内驻扎军队，所有匾额、楹联被毁无遗。今已不存。