“百忍图”的故事见《旧唐书·孝友传·张公艺》：郓州寿张人张公艺，九代同居。至唐代高宗有事泰山，路过郓州，亲幸其宅，问其义由。其人请纸笔，但书百余“忍”字。高宗为之流涕，赐以缣帛。自此“百忍图”故事广为流传，张姓人也自此以“百忍堂”为堂号。而在永定大溪游氏的五福楼内也有“百忍图”，此来源有一个典故。 

　　建五福楼的游友龙公（１７１６－１８０６）生前为人谦和，温文尔雅。有次带一孙子到相邻的万石村收租。不料那佃户蛮横不讲理，不仅拒不交租，还摔坏友龙公的米斗并撕破了友龙公的长衫，见此情景，友龙公的孙子拔腿就往家里搬救兵，闻讯的族人手执锄头直奔万石。路上碰见回家的友龙公，友龙公止住大家，说并没有被打，只是自己不小心摔倒，坏了米斗也破了衣裳。既是如此，大家也就作罢。过了几年，那个佃户去世了。知道消息后，友龙公杀了一头猪，叫全家人聚餐。晚饭后，友龙公对满腹狐疑的家人开口了：“几年前，我在万石确实被人打，米斗是他摔环的，衣服也是他撕破的。当时你们那么多人要为我出气，如果我不撒谎制止，你一拳我一脚，他肯定会被你们打死。出了人命，就要吃官司，轻者花钱消灾，重则倾家荡产，这又何苦呢。如今那人已过世，他的死与我们无关，所以杀猪庆祝我们没有因他而出事。”次日，友龙公请赋闲在家的巫宜福翰林在楼内的大厅入口处门楣上手书“百忍图”三字，以诫子孙。 且说，这“百忍堂”是张氏的堂号，可现游氏竟把“百忍图”书于家中，距五福楼几里远的张氏便是大为不满，有一张氏青年便寻机找碴。一日，那青年赶集，路经五福楼，特地进来拜访友龙公，询问上街的路怎么走，友龙公便以口告之以手示之。过了几天，那青年又来询问上街的路怎么走，友龙公仍以礼待之。如此三番五次，友龙公不耐烦了，对那青年说道：“后生哥，我都告诉你好几次，你不烦我都烦了。”那青年听了，笑道：“你不是以“百忍图”自居吗？才忍了几次就不耐烦啦？”友龙公听后，满心羞愧，随即为“百忍图”添一副对联：百般千般般般要让，忍事怕事事事不生。后来又增了一幅：百行思张公家训，忍耐遵朱子格言。“百忍图”原迹已为岁月所侵蚀，现有的是上世纪八十年代初，重修楼时后人据原样所摹。