退思园建于清光绪十一年至十三年(公元1885一1887年)，园主任兰生，因人弹劾被革职，取名“退思”以期补过。园的设计者袁龙，诗文书画皆通，他据水乡特点，精巧构思，用两年时间建成。园占地虽不足0.65公倾，却集多种造园手法于国内，堪称园林精品。

退思园住宅分内外两部分。外宅三进