多年来，吕老的家人照料他的生活。他的长孙女吕舜华，曾在各种武术比赛中多次获得优异成绩。现在，吕舜华行医授拳，已担当起爷爷念念不忘的弘扬中华武术重任。对网上的讹传，她反复强调：我爷爷不是神仙，他没那么厉害。
与吕老相处时，他的坦诚让人敬佩——实事求是，从不故弄玄虚。别人夸他强健，他却直言相告，现在腿有点软了，头有时会晕。因此，有幸能接触他的人，应该像爱护国宝一样爱护老人，体恤老人。比如吃饭，不要安排去没有电梯却要徒步上楼的饭店。
然而遗憾的是，几乎“得道成仙”的吕紫剑老人也要面对这个世俗社会的一些困扰。比如人们想知道吕老先生的长寿秘诀，但是他老人家同样也有自己的隐私需要保护。过去家里一贫如洗，现在什么都有了，他的晚辈只是希望老人家深居简出，能安安静静地颐养天年，这个愿望也应当得到尊重。