王馀佑的父亲王延善是一名地方学者，他性格豪爽，重情重义。在明朝末年，他将家中财产用于结交宾客。明朝灭亡后，王延善带领三个儿子与
雄县的马鲁一起举起义旗，发布檄文讨伐叛军。当时
容城县的
孙奇逢也发起了反抗行动，他们共同收复了雄县、新城和容城县，处决了当地的伪官员。然而，
顺治初年，王延善因被仇家诬陷而被捕并送往京城。馀恪为了替家人报仇，独自前往京城，最终与父亲一同在燕市被害。馀严则在夜间率领勇士潜入仇人家中，杀死了包括老人和孩子在内的三十多人。由于追捕非常紧急，幸好有一位了解真相的上级官员极力为其辩护，馀严才得以幸免于难。王馀佑则选择隐藏在
易州的五公山，自称五公山人。他曾师从孙奇逢学习兵法，后来又跟随孙奇逢研究人性和命运的学问。他在隐居期间传授知识，强调忠诚和孝道，注重实际的学习。王馀佑一生致力于教育他人，不追求功名利禄。他教导人们要忠于国家和家庭，重视实践能力。在他去世的时候，享年七十岁。