退思园,建于清光绪十一年至十三年(公元1885-1887年)。光绪十年(公元1884年),内阁学士周德润勋任兰生盘踞利津、营私肥已。光绪十一年(公元1885年)正月,解任候处分,旋因查所勋都不实,部议革职位。任兰生落职回乡,花十万两银子建造宅园,取名“退思”。其弟任艾生哭兄诗有“题取退思期补过,平泉草木漫同看”之句,可见园名取《左传》“进思尽忠,退思补过”之意。退思园的设计者袁龙,字东篱,诗文书画皆通。他根据江南水乡特点,因地制宜,精巧构思,历时两年建成此园。园占地仅九亩八分,既简朴无华,又素静淡雅,具晚清江南园林建筑风格。退思园布局独特,亭、台、楼、阁、廊、坊、桥、榭、厅、堂、房、轩一应俱全,并以池为中心,诸建筑如浮水上。格局紧凑自然,结合植物配置,点缀四时景色,给人以清澈、幽静、明朗之感。退思园因地形所限,更因园主不愿露富,建筑格局突破常规,改纵向为横向,自西向东,西为宅,中为庭,东为园。宅分外宅、内宅,外宅有轿厅、花厅、正厅三进。轿厅、花厅为一般接客停轿所用。遇婚嫁喜事、祭祖典礼或贵宾来临之时,则开正厅,以示隆重。正厅两侧原有“钦赐内阁学士”、“凤颍六
内宅建有十楼十底南北两幢楼,以园主字号名为畹芗楼,是园主与家眷起居之处。楼与楼之间由“走马楼”回廊贯通,南北一式落地长窗,五楼屋底挂落栏槛,檐廊相接,典雅明敞。复廊东西两侧各设楼梯,雨天不走水路,晴天又可遮阳,又为主仆上下时避让。畹芗楼下另设下房数间,供侍者居用。内宅为园主居住及藏宝重地,因此内宅两侧石库门均用清水方砖砌成,以防火防盗。砖木结构的封火门,据说在同里的明清建筑中,仅此两扇尚属原物,其馀都为近世复制。
中庭是西宅到东园的过渡。放眼庭中,樟叶如盖,古兰飘香,清雅幽邃,有引人入胜之妙。
庭中旱船,前舱八扇长窗如锦屏障目,隔而不断,船头面对“云烟锁钥”月洞门,船身相接漏窗暗廊,隐去船尾,俨然一艘待航的客船。旱船又与南北两侧的坐春望月楼、揽胜阁、迎宾居、岁寒居等厅楼建筑相形错落,平添美感。江南古典园林中,石船、石舫极其多见,从中略可窥见水乡人家对水、对船,有着特殊的依恋情结。登上坐春望月楼可四季望月,吟诗酬唱,也可楼前踏月,静赏花木。楼之东侧一隅为揽胜阁。