施世泽生于顺治十二年（1655年），系施琅长子。施琅被征入京时，施世泽随家眷入京，侍于施琅身边。

康熙十年（1671年），施世泽奉父命返回福建完婚，并留在故乡经营产业，同时接济施琅在京的各种开销。

康熙十二年（1673年）三藩之乱爆发，郑军攻占泉州，施世泽未能及时逃脱，被郑军挟持。郑经闻听施琅之子被俘，立时喜出望外，下令授予其女宿镇之职。施世泽惟恐连累到施琅和在京的家人，坚辞不从。郑氏集团向来视施琅为心腹大患，早在康熙五年（1666年），郑经集团中的核心人物洪旭就告诫郑经：施琅“素抱韬略，心怀怨恨，水务地方谙熟，必能自请东征。当勤训练操演，一旦有警，便可御敌。”洪旭死后，郑经把他的话作为金玉良言，铭记于心。于是，阻止施琅出任清军将领并率兵攻台，成为他的最大问题。施世泽被获，当然是如获至宝，若施世泽任郑将，则施琅必将受清廷疑，也就难于获率兵征台了。但是，如果若杀了施世泽，则更增加了施琅之仇，也会让施琅因此获得清廷信任，有机会出任水师提督。事实证明，郑经的反间计收到了很好效果，姚启圣多次举荐施琅而不成，就源于此。