慈姥山相傳為南朝梁武帝蕭衍長子蕭統(tǒng)（即昭明太子）讀書的地方。昭明閣內(nèi)原建有臨江樓、顯化閣等，清咸豐年間均遭兵毀，同治六年（1867年）重建昭明閣，為三層建筑。民國時期被毀壞。歷代文人多有歌詠昭明閣的詩賦，其中清代孫佩琳《昭明閣》詩云：“慈姥磯頭一棹停，昭明書閣掩松扃。蕭梁一代才人盡，山色六朝江上青”。