提出这种主张的副掌门，都是些掌管着衡山派中一些武力部门的副掌门。他们都认为自己有能力单独率队将四大家族在衡阳府地界上的势力铲除干净。他们同时也都认为吕副掌门手下没有这么强的武力，不敢拼着损失不顾单独接下这个任务。
在几次会议上，吕副掌门与这些其他副掌门争得不可开交。吕副掌门试图分化这些个副掌门，但这些个副掌门已经防着吕副掌门的分化，早已事先商量好，无论最后是谁接下了这个任务，现阶段要统一起来，一致对付吕副掌门。
莫掌门的态度也明显是偏向这些个副掌门，莫掌门在会议上说：“我们该不该对四大家族动手，其实可以不用讨论。四大家族做的事情，大家都在看，我们做的事情，大家也都在看。我们消灭四大家族，是不是在替天行道，人人都可以有看法，我们也不用非要说自己是在替天行道。这件事情做不做，我们一个衡山派已经说了不算，武当派、华山派、嵩山派都准备出手了，我们若是不出手，就是站在了武林同道的对立面。我们可以先做准备，若是别的门派都动手了，我们就出手。至于四大家族的财产怎么分，谁来分，我同意多数人的意见。这件事情毕竟是一件有风险的事情，不能让承担风险的人吃亏。”
莫掌门的表态，让吕副掌门如坠冰窟。
吕副掌门甚至在考虑要不要接下这个任务，他与自己的心腹吕文清商议：“这些个副掌门都团结起来了，哪个都不愿意与我单独谈一谈，分化他们是没有希望了。莫掌门也表态了，看来这件事情没有回旋的余地了。我们若是不想放弃四大家族这些财产，只能选择接下这个任务。你是什么看法？”
吕文清对吕副掌门说：“四大家族也不是软柿子，谁也不敢保证四大家族在衡阳府的地界上没有隐藏的高手。若是在这个过程中，折陨了我们这边的几个高手，那就亏得有点大了。我们缺的不是钱，而是武力。”
吕副掌门说：“你分析得不错，若是只为了这些钱财，就折陨了我们这边的高手，那可真就是亏了。但消灭四大家族，也不单单是与钱财有关的事情。”
吕文清问吕副掌门：“大人也不至于会看上四大家族的武功秘籍。”
吕副掌门说：“四大家族的武功秘籍我个人是看不上？我衡山派的武功秘籍岂不是要比他们的高上许多等级？”
吕文清问吕副掌门：“那四大家族还有什么吸引大人的？大人又何必非要执着于这件事情？”
吕副掌门说：“到了我这个层次，所看重的利益已经不能再用数字来衡量。对于我这样一个衡山派副掌门，一百万两银子和一万两银子没太大区别。通过四大家族这个事件，赚多少银子，对我来说，真的是不重要。自始至终，别人都以为我是掉在了钱眼里，想要独吞四大家族的财产，其实这是我故意放出来假象。我所看重的，其实是影响力。消灭四大家族这件事情，不只是一个利益相关的事情，更是一件很有影响力的事情，能让一个人的影响力得到极大的提升。我们常说的影响力，其实有两种，你可知道是哪两种？”
吕文清说：“请大人教我。”
吕副掌门说：“我们常说的影响力，有两种。第一种是抽象抽象的影响，是泛指的影响力，是一个人一呼百应的能力。第二种则是具体的影响，是针对某一特定事件的影响力，是一个人决定某一个事情走向的能力。若我能将消灭四大家族在衡阳地界上的势力这件事情掌控在自己手中，我的影响力会得到极大的提升，而且是两种影响力都能得到极大的提升。我这样说，你明白了吗。”
吕文清说：“还请大人继续为我指点。”
当吕副掌门有说教之意的时候，吕文清从来不会用一句“我知道”，来打扰到吕副掌门的兴致，吕文清从来都是很识相的说“请大人指点”之类的话，让吕副掌门说个尽兴。
吕副掌门显然也是明白自己这个心腹当然不是愚钝之人，而是一个不仅聪明，而且还知道什么时候不该耍聪明的懂事之人。吕副掌门非常喜欢吕文清这一点。
吕副掌门于是就兴致勃勃地说：“虽然四大家族虽然人人喊打，但威名犹在，一般人看四大家族还是觉得高不可攀，想到与四大家族作对还是会心惊胆战。在此情况下，无论是谁，只要能够一举消灭四大家族，就算只是消灭了四大家族在衡阳府地界上的势力，一定可以让世人震惊，为自己立下巨大的威名，让自己的声望得到极大的提升。声望的提升最直接的好处就是提升了影响力，声望越高之人，越能在江湖中有号召力。虽然近些年来没有见过，江湖中是从来都不缺少能一呼百应的大侠。这些大侠并非什么手握重权的大门派掌门，也不是什么武功登峰造极的天下第一高手。这些掌门、天下第一高手尚且不能做到的在江湖中一呼百应，这些大侠们却能做到。这就是声望的作用。声望并不是与权位、武功绑在一起的，一个人的声望是靠一个人做出的事情积累而来的。我并不奢望能得到这种能在整个江湖中一呼百应的影响力，因为要让自己的影响力达到此种地步，必须要有极大的声望，而极大的声望往往只有极大的牺牲才能获得，我并不是愿意牺牲的人。”
吕文清听到吕副掌门这样评价自己，连忙说：“大人是我见过得最聪明的人。聪明人总会有解决问题的办法，不用非要牺牲不可。”
吕副掌门笑着对吕文清说：“我这种人，与那种愿意牺牲的人比起来，不知道谁是真正的聪明人，或许他们才是真正的聪明人。”
吕副掌门虽然嘴上这样说，但对吕文清这番话还是觉得很受用。