也在此时，跛豪搭上吕乐的顺风车成为了三大毒枭之一，并成立“义群”社团，那时候的义群在江湖之中可谓是风生水起，但就如电影中一样，跛豪在外面再怎么厉害，还得看吕乐的眼神行事。
除了跛豪的“义群”崛起，新义安亦是暗中积攒力量，只是极为低调，在吕乐在位的十多年间，新义安积攒下不少钱粮，为日后插旗陀地、成为“香港第一黑帮”奠定了坚实的基础。
吕乐在白道里办案速度也是出奇的快，因为他根本就不需要知道谁是真凶，只需要吩咐这帮看他脸色吃饭的黑帮大佬们，大佬们就会帮他找到真凶，即使找不到了，也能叫几个马仔来顶包。
这就像当年叱咤上海滩的黄金荣，一边是青帮大哥大，一边又是法租界探长，甚至有时候案子还没发生，他就能提前知道谁会是真凶，着实有点离奇。
1967年，吕乐收到要开始反贪的风声，此时他的财富已经足够吃三代人，于是提早退休。
1973年，吕乐让家人逃往枫叶国，自己则逃往台湾，因为他知道1974年会有廉政公署成立，这回可是动真格的。而跛豪偏偏不信邪，结果成了出头鸟。
而新义安在吕乐退位的时候，也收敛了起来，此时钱粮充足，四处招兵买马，由“大总管”林景带人四处插旗，到了八十年代末，更是甩开和胜和与14K，成为香港第一大黑帮。
2010年，吕乐在加拿大病逝，一代枭雄就此落幕。
据统计，吕乐在位时敛财超过五亿，于是有了《五亿探长雷洛》这部电影。但吕乐在接受采访时表示自己没有拿那么多，也不知道是真的还是假的。
