驻芳阁位于恒永宫禁宫西侧。整座恒永宫为一凤展之形，两侧开翼极是宽阔，以散翎间错之形罗列，共占地二百三十多顷，分为三个主要的宫殿建筑群。正中为恒永禁宫，占地九十六顷，为皇家主要居往场所。西侧为瑞映台，占地六十四顷，为皇室偏宫，内里主要为园林，湖泊，山景。东侧为五方台，为皇家祭农稷之地，占地亦为六十四顷。三处宫落连成一线，内里相通。沿禁宫在内周围共计六百多顷之地皆为内皇城，不设民居，皆为宫中辅司之地。恒永禁宫前端有如凤首，以端正，端方，端阳为正三门。
入端阳门则入禁宫之内，过端阳门，入禁宫十正大场，然后是白玉九孔拱桥九座，正中一座正对皇极殿，为禁宫之中首殿，为皇家极庆大典场所。之后便是祥泰殿，崇正殿，兴华殿。这三殿依次纵列，两侧设高台九转环廊，罗列殿房角楼，分别为执行，居安，宗堂等地的暂配所，以及宫廷侍卫校统列派所。这一带统称为外廷，一般情况嫔妃是不能到这里来的。
从兴华殿后转白玉廊桥，是为中廷。中廷开分三路。中路有勤政，崇德两殿。为皇上听政和接见来使所在。以红墙相隔，两侧皆有长甬碧阶道，隔环廊，有两个小园，东为舒怀，西为畅心。启元殿倚舒怀园，倚游廊隐厢有行务属御庭卫，为皇上日常处理事务所在。畅心园设有偏殿角殿，后面有文华阁充秘院，兴华阁御史堂，为皇上内侍近臣待传事务所在。
东西两园再向南，便为近内廷所在，也便到了凤形双翼之地。中央是前御园，两侧亦有两个小道相通，有中华、倚华两阁，更有两个园子，倚中华阁为中都园，以倚华阁为倚凝园。之前连接中廷便是皇上所居的乾元宫，皇后所居驻心宫。
接着有通廷大道，两分东西，东西配园两侧，如凤翎罗列各个宫房，翎展中央的位置除有宫墙外，更各有巧廊，各式景系所隔。最尾端有后御园，连接皇城内渠，与前园只有一个小湖不同，后园有泛舟大湖，为清瑶池，设山林景，隔池为二。寿春宫一带独分一支，隔墙而绕，为太后，太妃等安居之所。
驻芳阁在西侧正中，有引自清瑶池的溪泉注入宫中后院，是单僻出的一个幽静之所。虽然宫房所占之地，等阶逊于绯心所住的掬慧宫，但是胜在其景别致。后院有小泉，竹筑，亦有灵嫔别出心裁开的一方小角落搭建草舍，倒是宫中一隅，别有出尘草田之风。灵嫔自设暖坞，培育各式花草。此时暖坞之中，各品菊花正争奇斗艳，高株足有三四尺，低株掩于丛碧，摇摇曳曳，满坞生彩。绯心略一看，就见足