荣宗敬的祖父荣锡畴（1823－1863）当家时，他开始做点长途贩运的小本生意，经常驾着小船经太湖、吴淞江等河道往来上海，去时满载乡下的土产，回来时带回上海的日用品，一来一去，赚些蝇头小利，贴补家用。尽管他们日子过得仍然很艰苦，传到荣宗敬的父亲荣熙泰手里的财产，只有几间旧屋，但这些原始的商业活动，却为荣家子孙注入了最初的商业细胞。
“天有不测风云，人有旦夕祸福。”一百四十多年前，荣家和江南许多家庭一样，在太平军打到苏南的时候，遭到了一场空前的劫难。那时太平天国运动已进入后期，与曾国藩的湘军在常州、无锡、苏州一带遭遇。战乱中，荣熙泰的祖父、祖母、父亲、两位伯父、伯母、堂兄，以及他自己的兄弟，包括才3岁的小弟弟，不幸全部遇难。荣氏家族的男人只剩下了一个，这就是荣宗敬、荣德生的父亲荣熙泰先生。
所以荣氏昆仲的祖坟是出了极大问题，可说丁财败绝！而荣氏昆仲的发积，完全是父亲荣公熙泰的坟的力量。
荣公熙泰於一九零六年扦葬於横山北赐福堂坟西，横山、东山、浒山是无锡的来龙尽结之处。荣家所有故世长者皆於一九零零年後扦葬於此地一带，成为家族墓园，为保护坟墓，荣氏昆仲将此地的数个山头买下，建梅园。1912年，先购东山进清初进士徐殿一的 “小桃园”故址建梅园；越十年，拓址浒山，後扩梅园至横山，面积达812亩。立意“为天下布芳馨，植梅万树；与众人同游乐，开园圃空山”。故倚山饰梅、依势赋景，随机设洗心泉、梅园刻石、紫藤廊亭、太湖石奇峰、天心台、揖蠡亭、荷轩、研泉、香海轩、诵幽堂、留月村、招鹤亭、小罗浮、秋丹阁、豁然洞等，更以建于1930年，高18米的念劬塔为点睛之笔，俯领梅海，湖山有情；另建乐农别墅、宗敬别墅、景堂、网球场、敦厚堂等，为园主起居及子弟读书、健身处。合官的相地，复经人文点染，遂成江南赏梅胜地。
