阅江楼始建于明宣德年间，原为平房，清顺治十四年(1657)改建为两层楼房，高15米，是典型的南方园林庭院式古建筑。这里是肇庆八景之一，名曰“江楼晚眺”，历代有不少文人雅士曾在此吟咏酬唱，留下了一些著名的诗文。南楼檐下悬挂木匾额，上有楷书“阅江楼”巨字。阅江楼的建筑布局讲究匀称、均衡，楼房高2层，分东西南北4座，楼与楼间建有回廊小阁，相互衔接。因此，各楼之间可以全部贯通，组成四合院式的整体建筑。中间是典型的岭南庭院，设有水池假山以点缀，四周有前人所载的米兰古树，弯扭虬曲的树身周长粗达80多厘米，为米兰中所罕见，每年两度花开时节，馨香四溢，沁人心脾。现为肇庆市博物馆。