庐山会议旧址始建于1935年，1937年竣工，原名庐山大礼堂，与在它西南边的抗战博物馆（原图书馆）、庐山大厦（原传习学舍），合为“庐山三大建筑”，新中国成立后，这幢建筑更名为庐山人民剧院，先后于1959年、1961年、1970年在此召开了三次会议。

会议旧址共上下两楼，屋子覆蓝色琉璃瓦，正面有三扇圆拱形大门。
一楼有一间房间每天循环播放将三次庐山会议剪辑汇编后的纪录片《历史的回眸》。
二楼是大礼堂和休息室。大礼堂是当年“庐山会议”的会场，依然保持着1970年中共中央九届二中全会时的原貌。

庐山会议旧址西南不远处的抗战博物馆是对抗日民族统一战线形成具有重要意义的地方。