因为乔峰新一辈的能人，武功厉害，威胁到他们了， 乔峰是个大好人，就喜欢杀坏人，所以说四大恶人害怕了。
首先，管不了。四大恶人的武功都很厉害。武功最差的云中鹤，可以和丐帮长老打成平手。而丐帮长老可是从30万弟子中精选出来的，是高手中的高手了。而武功最高的段延庆独步江湖，少有敌手。慕容复名气极大，是武林中赫赫有名的南慕容，他联手4大家将仍然打不过段延庆。可见，中原武林如果单打独斗的话，几乎没人能够打过段延庆。
在大理国聚会之前，四大恶人已经多年没有相见。南海鳄神自称隐居起来苦练武功，试图和段延庆决战，结果还是打败了。显然，南海鳄神是隐居在南海，也就是今天南中国海某个岛屿上修炼。这种地方在当年很偏僻，中原武林人士根本就找不到。而段延庆平时也是隐藏身份，找机会争夺王位，所以以大理国皇帝段正明的博学，还是认不出他。不在公开场合出现，自然难以对付他们。
但是对坏人呢，且因为与己无关，便坦然处之。因为无能为力，便大肚能容，因为无人出面，便熟视无睹，充耳不闻。对乔峰如此，对乔峰的父亲萧远山何尝不是!当初萧远山带领妻儿和族人路过剑门关，便被中原武士不问青红皂白的狙击，何其无辜，何其壮烈。所以说四大恶人觉得乔峰威胁他们了。
金庸书中所描绘的那些所谓的江湖正义，大部分也没有那么的正大光明。他们对善良的好人求全责备。他们多有群胆，却少孤勇 ，多沽名钓誉 ，多明哲保身，不问青红皂白的盲从，却少光明磊落，少光风霁月，少江湖道义，少大公无私。
其实细细想来，那些特别执念于乔峰契丹身份的人，并没有真正是为了国家大义，他们都是为了一已之私。乔峰身世之所以会暴露有康敏的挟私报复，掐尖好强的恶毒之心，有白世镜全冠清为了淫欲野心的阴狠谋算，但更多的是武林人士道听途说，不问原因，不问对罪，只要有人组织，便趋之如鹜的狭隘。
当时到聚贤庄围堵乔峰的人，有的受过乔峰恩惠，有的是乔峰朋友，可仅仅因为一个身份，却翻脸无情，想起也是心寒。当年乔峰还没有公布自己身世的时候，周围都是把酒言欢的朋友，惺惺相惜，没想到，一个身份，却可以让一个人一身本领无处施展，所有的善良都变成了心机，变成了猜忌，让人不免唏嘘。
但是对坏人呢，就因为与自己无关，便高高挂起，便坦然处之。因为自己并不会做什么，便大肚能容，因为无人出面，便熟视无睹，充耳不闻。对乔峰如此，对乔峰的父亲萧远山何尝不是!当初萧远山带领妻儿和族人路过剑门关，便被中原武士不问青红皂白的狙击，何其无辜，何其壮烈。