乾隆十三年，袁枚辞官居园中。

从此以后，退出仕途，徜徉于山水烟霞之中，吟诗作文，结交士子权贵，几达半个世纪。

清代金陵名人陈作霖的《炳烛里谈》说：&ldo;距随园数里外的红土桥，达官贵人来随园要在此屏弃轿舆与仪仗，轻车简从，步行上山。

&ldo;可见当时妆点山林多大也。

&rdo;乾隆十四年写了《随园记》这篇记文，实是从远处看随园的一幅鸟瞰，我们可从袁枚撰写的声情并茂的看出随园的奢华&ldo;开筵宴客，排日延宾，酒赋琴歌，殆无虚日，其极一时裙屐之盛者。

山上遍种牡丹，花时如一座绣锦屏风，天然照耀，夜则插烛千百枝，以供赏玩。

先生排日延宾，通宵宴客。

几有应接不暇之势袁枚退居随园，按理说应当过着山中隐士的生活。

然而不是，袁枚名气太大，简直成了&ldo;山中宰相&rdo;。

围绕这座花团锦簇的园林，官宦士子、文人墨客纷纷来拜，&ldo;先生排日筵宾，通宵宴客。

&rdo;不仅进园吃酒要预定日子，而且入夜还在山上遍插蜡烛，赏玩的人络绎不绝。

袁枚在随园此举，影响了十八世纪整个中国的诗风。

叹惜的是嘉庆二年袁枚病殁，不久随园就荒芜了，虽经其子努力又稍有起色。

后太平天国定都南京，据说由于清军封锁，太平军粮食匮乏，便废园耕垦，以供天王府内食用。

太平天国灭亡后，老百姓又恳山开田，以至随园面目全非，无限繁华，已成凋敝。

清人《石城山志》纪录了随园衰败的情况；&ldo;今则平原一片，双湖水仅一泓可辨，以外绝无坡陀处，其实随园凋零还另有原因。

清人曺梅溪的《梅溪丛话》讲的公允：&ldo;随园所得皆卖文钱，至多不过所谓秋风一二，岂能长护此亭馆。

即无太平军，及今必成墟矣。

&rdo;随园湮没了，只有在南京五台山体育中心南京师范大学附近还能找到&ldo;随家仓&rdo;这个地方，此地得名袁枚的随园书仓。

而书仓的缘起则浸透了这位江左才子的苦心。

袁枚《随园二十四咏。

书仓》诗云：&ldo;聚书如聚谷，仓储苦不足。

为藏万古人，多造三间屋。

书问藏书者，几时君尽读？&rdo;随园书仓有三十万卷藏书，以及&ldo;器用则檀梨文梓，雕漆鹄金，玩物则晋帖唐碑，商彝夏鼎，图书则青田黄冻，名手雕镌，端砚则蕉叶青花，兼多古款，为大江南北富贵人家所未有。

&ldo;烟雨河山六朝梦，英雄儿女一卷书。

&rdo;

如今，随园的故址早已荡然无存，只留下历劫不散、弥传弥烈的书香和这些充满诗情画意的往事。

不过没了也好，如留在现在，房价飙升，对袁家后人也是麻烦，随园面积原有220多亩，在太平天国后期毁于兵燹，亭榭楼阁全成废墟。

从1936年开始，袁枚的后代因家产争讼。

直到12年后，袁枚后人曾为家产发生争讼，打到当时的首都高等法院，历时半载，最后判决，随园遗产由袁枚两房子孙平分，各得二分之一。