然而俗话说:富不过三代。明珠家的后裔，不小心得罪了乾隆宠信的权相和(新时代的明珠)，新账老账一起清算，家产被籍没。明珠的亡灵被打下十八层地狱，朝廷指责其贪财纳贿、卖官鬻爵(“簋不饬、货贿山积”)。而什刹后海的明珠旧第，被和霸占为别墅。一朝天子一朝臣嘛。偏偏这和，又重蹈明珠之覆辙，乾隆一死、靠山一倒，即身败名裂。嘉庆帝将和别墅收回，赐给成亲王永。到了光绪年间，又成了醇亲王载沣的王府。
载沣的儿子溥任讲解醇亲王府的西花园：“正门三间，但终年封锁，经常由一个随墙门往来。进园后首先看到两座土石假山为屏障，循山口过小桥见竹林一片，中有方亭一座。依长廊而行有一六方亭，篆书额曰‘恩波亭’，此亭两面临水，因奉旨许引玉泉水进园，故命亭为‘恩波’。水由西引入，绕园一周，由东端流出园外。循长廊而前可直达南楼上。南楼前临水有明开夜合树七株，其中两株据园林学家鉴定为二百余年前的古木。”
200余年前，恰恰是纳兰性德的时代。查纳兰性德《通志堂集》，确有《夜合花》(是其病逝前的最后一首诗)：“阶前双夜合，枝叶敷华荣。疏密共晴雨，卷舒因晦明。影随筠箔乱，香杂水沉生。对此能消忿，旋移近小楹。”因而“据此可确定为当年纳兰性德所手植”。纳兰性德咏“夜合花”后，大病一场，过了7天即然辞世。其好友在祭文中说：“夜合之花，分咏同裁。诗墨未干，花犹烂开。七日之间，至于兰摧。”
溥任早年常听说西花园即大观园：“因为曾有人认为《红楼梦》一书是写明珠一家之事。后经考据证实《红楼梦》是曹雪芹回忆自家往事，这个传说就成无稽之谈了。”
