眼下已经属于高务实的这座别院里头，倒是有两个小池塘，其中一个位于山脚，进正门不远，穿过影壁便是，大概也就比后世一个篮球场略大一些，看起来应该是用来会客闲谈的休憩之地；山上的花园里也有一个，从规划上来看应该是主人家自己休息赏玩用。

与水相比，北方园林更偏向对于山的造景，园林当中山势雄伟，以高、壮为美，山体较为高大的那种，是皇室贵族的象征，甚至一些园林就选址于高大雄伟的自然山体当中，以彰显园主的身份地位。勋贵按照爵位高地，通常等而下之。

而根据张津介绍，这座别院早前是成化年间大太监汪直所建，不过汪直原本倒也不是打算自己享用，而是准备进献为皇家别院的，不过因故未能如愿。

到了弘治朝，此别院辗转数度，最后被弘治帝赐予当时名臣、号称“三贤相”之一的谢迁。谢迁头一回来此别院即去附近樱桃泉观景，回来之后便将之称为樱桃泉别院，也称樱桃园。

此园后来多次转手，最后由张四维于嘉靖四十一年任会试同考官之前买下，他大概觉得叫樱桃园有些像果园子，因此一般呼为“樱桃泉别院”。