导演李添胜不放心他的演法，觉得太随意、太现代，刚好那时周星驰的无厘头风格大肆流行，生怕他走到无厘头的路上去。
有一场戏是任我行父女与向问天讨论夺回教主之位，导演希望镜头里有男主角，便要吕颂贤坐在中间参与。吕颂贤不肯，他觉得令狐冲应该抱着双臂站在一边，眉头紧锁，四下张望–听那些人一本正经的讨论已经让他很不耐烦。
他和武行也有分歧，武术指导给他设计了一些打戏结束时定格的动作，但吕颂贤只想打完后把剑随意地向地上一指。
“他们都觉得令狐冲应该是个大侠，就像所有古装剧里的男主角一样。但我知道不是，他身上没有条条框框、程式化的东西。他不想做英雄，不想称霸武林，只想去玩。”
监制找他谈话，TVB的高层也请他去办公室，但他非常坚持，这种坚持源于他对令狐冲这个人物天然的亲近感，也源于他的底气。他知道自己在台里的位置，如果他说不演了，再难找一个像他这么能演能打的男主角。
吕颂贤能打是出了名的，他在演艺学院练过京剧的毯子功，毕业后被陈自强看中，在成家班训练了一整年。拍第一部戏《拳王》时，在拳馆摸爬滚打半年，后来还做了香港泰拳协会名誉会长。
在片场，年轻演员碰上血气方刚的武行，难免有些摩擦。为了让武行服气，吕颂贤专挑了一场难度很高的打戏亲自上阵：令狐冲为救仪琳，与田伯光在洞穴中对打，被田伯光一脚踢出山洞，撞在外面一棵高高的树上，再从树上滚落在地。本可以不拍脸，但吕颂贤要求导演全部加上面部特写，让大家知道他没用替身。从这以后，武行对他有了几分敬意。
吕颂贤觉得自己像令狐冲，不是洒脱，而是身上有江湖气，比如要用打来让别人服气，比如在生活中和人交往，三教九流都可以同桌谈笑。
如今任盈盈的扮演者梁艺龄投身神学，林平之的扮演者何宝生剃度出家，任我行的扮演者王伟溘然长逝，曾经同在江湖者，多已归隐零落。
“那么你对江湖的理解是什么呢？”
“世界，社会，名利场，就是江湖。你说，人哪有一刻不在江湖？”
天生是条鱼
在江湖的吕颂贤逐渐感觉到被动。
2000年，因不肯和无线签经纪人合约–不想被拴牢，结果无线连部头合约也不和他签了。离开TVB后，他度过了一段相对空白的时间。
5年亚视，5年无线，年轻时对香港电视行业的热情已被消磨殆尽，他觉得电视剧就是流水线上的产物，越演越空虚。
“那时候已经认识到，电视是用来听的，不是用来看的。因为香港的家庭主妇很喜欢边做家务边听电视，所以电视里事无巨细都要用嘴巴讲出来。如果想玩画面语言，主妇就要从厨房探出头来，‘怎么没声音了？’”