院门为垂花门，上题宜芸门。殿内家具均系珍品，用宝石、竹丝镶嵌，拼出图。东配房称道存斋，西配房名近西轩。宜芸门内侧廊壁上嵌有10块石刻，是乾隆帝摹写的各家法帖，原藏于惠山园内，重建时移此。
位于光绪皇帝居住的玉澜堂北侧，东临德和园，西边靠近
慈禧居住的乐寿堂。在清朝末期，这里是光绪的妻子隆裕皇后的寝宫。这座大院落的正殿由前五间和后三间组成，共有八间房，前后有门，室内宽敞，有精美的落地雕花隔扇，布局典雅富丽。东西配殿各有五间，也都有前后门，院内的南墙上，镶有十几块乾隆摹写的“三希堂”书法石刻。
宜芸馆始建于乾隆年间，1860年被烧毁，光绪年间重建。《续博物志》：“芸香辟纸鱼蠹，故藏书台称芸台。”芸是一种香草，可以防书中蛀虫，宜芸馆原是藏书之处，所以有这名称。
按照宫廷制度，皇帝与皇后并不同居一室。光绪在选皇后时，本来并未看中隆裕，而是被慈禧逼婚包办的。隆裕少才，容貌也很一般，光绪与她的感情并不融洽。光绪是慈禧的外甥，隆裕则是慈禧的侄女。在光绪与慈禧发生冲突时，隆裕一直紧跟慈禧。光绪被囚，隆裕仍自由自在地当皇后。1908年10月光绪病故，第二天慈禧也死去。慈禧临死前指定由醇亲王载沣之子溥仪继位。隆裕成为皇太后。三年之后，“辛亥革命”成功，由隆裕下了逊位诏书，从此结束了清朝200多年的统治，也结束了中国的封建王朝。两年后隆裕死去，时年46岁。
宜芸馆在乾隆清漪园时的陈设相当精雅。宜芸馆内陈设的布局是：室内正中安设宝座、地平、五屏照背，落地罩内面南设楠柏木包厢床、香几、书案、顶柜、绣墩、案、挂屏、插屏镜、自鸣钟、等物。几、案上放置书册、玉版。东间罩内设佛龛，供铜胎、玉胎佛像、佛经。前有香炉、香盘、欢门幡。配殿道存斋、近西轩内设有楠柏木包厢床、香几、书桌、如意椅、案、琴桌、冠架、顶柜、插屏、挂屏、字画等物。
光绪颐和园时，宜芸馆作为光绪皇后的寝宫，由于建筑功能和主人身份的不同，陈设的布置有了很大变化。其中光绪皇后的宝座使用了较为少见的“百宝嵌”工艺，小巧精致，极为富丽。1932～1958年，院内房屋出租，陈设收存。1979年，古建维修后，室内仅陈放家具。1992年，根据清漪园时的陈设档案布置陈设，整组院内陈列文物100余件。