真正让人恐惧的并不是这些人，还有后面的顾家和周家。
顾家大佬顾荣，在衣冠南渡的时候立了大功劳的人。
顾荣，字彦先。吴郡吴县（今江苏苏州）人。
西晋末年大臣、名士，也是拥护司马氏政权南渡的江南士族领袖。孙吴丞相顾雍之孙、孙吴宜都太守顾穆之子，
顾荣弱冠时仕于孙吴，与纪瞻、贺循、闵鸿、薛兼并称“五俊”。吴国灭亡后，与陆机、陆云一同入洛阳，号称“洛阳三俊”。
初拜郎中，转廷尉正，历任诸王僚属，封嘉兴伯。顾荣见北方大乱，故弃官南归。后任琅玡王司马睿（晋元帝）安东将军府军司，加散骑常侍。司马睿但凡有谋划，都与顾荣商议。
永嘉六年（312年），顾荣去世，获赠侍中、骠骑将军、开府仪同三司，谥号“元”。建武元年（317年），追封嘉兴公。
顾荣出身江南大姓“吴郡顾氏”，是三国时吴国丞相顾雍之孙、宜都郡太守顾穆之子。他幼时机灵而天资聪敏，二十岁入仕吴国，任黄门侍郎、太子辅义都尉。
顾荣年少时，与丹阳郡人纪瞻、会稽郡人贺循、广陵郡人闵鸿、丹阳郡人薛兼齐名，并称为“五俊”。
咸宁六年（280年），西晋灭吴，顾荣与陆机、陆云兄弟入京师洛阳，号称“洛阳三俊”。他到京后，依例官拜郎中，后历任尚书郎、太子中舍人、廷尉正等职。
吴郡顾氏，吴郡四姓之一。
按《史记》及《吴越春秋》所载，吴郡顾氏乃越王勾践七世孙摇汉之后。
禹治水周行天下，还归大越，登茅山以朝四方群臣，封有功，爵有德，崩而葬焉。禹五世孙少康恐禹迹宗庙祭祀之绝，乃封其庶子于越，号无馀，其传二十馀世，至周敬王时。
有子允常，拓地始大而称王。允常卒，子勾践立，称越王，灭吴称霸。
勾践后六世至王无疆，国为楚灭，诸族子争立，其闽君摇以佐诸侯灭秦，汉高祖封摇为越王，摇别封其子为顾馀侯，以爵为氏，汉初居会稽，此即吴中顾氏之先祖。
东汉明帝时有顾综，历御史大夫、尚书令，明帝举三代之礼，以乞言受诲。至三国时，有顾雍，即综之后也。
相传蔡伯喈避仇于吴，顾雍尝从之学琴书，蔡叹异之。孙权领会稽太守，以顾雍为丞，行太守事，郡得大治。后为丞相十九年，深得倚重，子孙繁衍于吴，累朝显赫至数百年。
顾雍是最早跟从孙权的江东世族代表，权为会稽太守，不之郡，以顾雍为丞，行太守事，讨平寇贼，郡界宁静，吏民归服。
后代孙顾邵为丞相，“其所选用文武将吏，各随能所伍，心无适莫，时访逮民间及政职所宜，辄密以闻。若见诺用，则归之于上；不用，终不宣泄。权以此重之。
“顾雍为相十九年，以缜密而宽容的长者之风，保持了孙吴政权与江东世族之间和谐的合作关系，国势呈稳定而上升之态。
晋穆帝时，以顾荣族兄顾众为尚书右仆射，族子顾和为左光禄大夫，开府仪同三司，加散骑常侍尚书令如故。
永康元年（300年），赵王司马伦废杀晋惠帝皇后贾南风，从而掌握朝政。淮南王司马允讨伐司马伦，但失败被杀，他部下的僚属都收付廷尉，将被诛杀。
顾荣公平处理，很多人获免罪而得以活命。
建始元年（301年），司马伦篡位称帝，顾荣改任大将军司马虔（司马伦之子）的长史。
同年，齐王司马冏等三王起义，攻灭司马伦。司马冏扶立惠帝复位，并出任大司马，执掌政权，并召顾荣为大司马主簿。
顾荣见司马冏专擅，担心日后司马冏倒台，自己会被株连，于是终日酒醉，不理公事，并将此事告知好友冯熊。
冯熊向司马冏的亲信葛旟建议转顾荣为中书侍郎。顾荣获转任中书侍郎后，不再饮酒，但有人问他为何“前醉而后醒”，顾荣害怕被追究，只得再饮。
太安元年（302年）十二月，司马冏被长沙王司马乂击败被杀，顾荣亦因讨伐葛旟有功而获封嘉兴伯，转太子中庶子。司马乂任骠骑将军时，又任命顾荣为骠骑将军长史。
永安元年（304年），成都王司马颖与河间王司马颙联军击败司马乂，司马颖升任丞相，又以顾荣为丞相从事中郎。
同年，东海王司马越带惠帝亲征司马颖失败，惠帝被俘至邺城，顾荣兼任侍中，并被派往拜谒皇陵。
但当时司马颙部将张方已据洛阳，顾荣受阻不得进，逃到陈留郡。同年，惠帝为张方胁逼至长安，又征召顾荣为散骑常侍，但顾荣见中原大乱，便不应召命，并回到吴国。
次年，司马越在徐州起兵迎惠帝回洛阳，任命顾荣为军谘祭酒。
永兴二年（305年），右将军陈敏在历阳郡叛变，驱逐扬州刺史刘机和丹杨郡太守王旷，意图趁乱割据江东。
为获得各方支持，陈敏礼遇一众江东豪杰和名士，其中顾荣被授为右将军、丹杨郡内史，其他四十余人亦获选任为将军和郡守。
江东士族初时接受陈敏任命，但在发现陈敏才能平庸、缺乏远大谋略且刑政无章后，便心中不服。而且陈敏纵容子弟横行，亦被当地人视为祸患。
顾荣与士族豪强周玘等一直都不是尽忠于陈敏，更终日担心跟随着他会遭祸劫。
永嘉元年（307年），顾荣等人接到庐江郡太守华谭写给他们的信，华谭在信中斥责他们接受叛变的陈敏所授的官位，为他做事；更称他日朝廷派兵讨平陈敏后，顾荣等人都愧对中原之士。
顾荣看后大感羞愧，于是决意反正，令人密报征东大将军刘准，劝其派兵至临江，自己作为内应。
刘准及后派扬州刺史刘机等领兵到历阳郡，陈敏得知消息后，也派弟弟陈昶及将军钱广到乌江对抗刘机。
周玘成功令钱广背叛陈敏，杀死陈昶，并勒兵朱雀桥南。