潘允端(1526～1601），字充庵，上海人，其父潘恩，字子仁，号笠江，官至都察院左都御史和刑部尚书。潘允端为明嘉靖四十一年(1562年）进士，曾任刑部主事、四川右布政使等职。万历五年(1577年）解职回乡。生平擅诗文、通园艺、爱好戏曲、收藏古玩。现存其61岁后写的《玉华堂兴居记》中，记有收购古书、文物事，且有价格。如“万历十四年十二月十三日(1587年1月28日），成杜凤林宋刻通鉴一部，计一百六十本，共价八十两”。“万历十四年七月十八日(1586年9月1日），成文王鼎、哥窑白宝炉等物，共银二十四两”。“万历十六年十月初五(1588年11月23日），成杜凤林子昂画一幅，价五十七两五分”。
潘允端留给世人最大的贡献就是修建了豫园。当时的潘家在上海为望族，潘氏父子都曾居明朝高位。时明嘉靖三十二年(1553年），长达九里的上海城墙建成，使及东南沿海的倭患逐渐平息，二十余年来生命财物经常受受到威胁的上海人民稍得安定，社会经济得到恢复并开始繁荣。士大夫们纷纷建造园林，怡情养性，弦歌风月。潘恩年迈辞官告老还乡后，潘允端为了让父亲安享晚年，从明嘉靖己未年(1559年）起，在潘家住宅世春堂西面的几畦菜田上，聚石凿池，构亭艺竹，建造园林。经过二十余年的苦心经营，建成了豫园。“豫”有“平安”、“安泰”之意，取名“上海豫园”，有“豫悦老亲”的意思。