约在明代万历末年到天启初年，扬州盐商郑元勋为奉养母亲，请住镇江的造园名家计成过江为他造园，园址选在扬州城外西南隅，荷花池北湖，二道河东岸中长屿上。《扬州画舫录》记载，崇祯壬申（崇祯五年），郑元勋的好友董其昌到扬州，与郑元勋谈论六法，这时园已基本竣工，“前后夹水，隔水蜀冈蜿蜒起伏，尽作山势，柳荷千顷，萑苇生之。园户东向，隔水南城脚岸皆植桃柳，人呼为‘小桃源’。”入门山径数折，松杉密布，间以梅杏梨栗。山穷，左荼蘼架，架外丛苇，渔罟所聚，右小涧，隔涧疏竹短篱，篱取古木为之。“园内，柳影、水影、山影，恍恍惚惚，如诗如画。郑元勋就请董其昌为这座园子题个名，董其昌说园中柳影、水影、山影相映成趣，叫影园如何？郑元勋拍手叫绝，董其昌随即挥毫题写‘影园’匾额。”
