时在禁直。长孙承业等启陈，神武义功既振，将除尔硃。节闵令舍人郭崇报彦伯知，彦伯狼狈出走，为人所执。寻与世隆同斩于阊阖门外，县首于斛斯椿门树，传于神武。先是洛中谣曰：「三月末，四月初，扬灰簸土觅真珠。」又曰：「头去项，脚根齐，驱上树，不须梯。」至是并验。子敞。
敞字乾罗。彦伯之诛，敞小，随母养于宫中。年十二，敞自窦走至大街，见童兒群戏，敞解所著绮罗金翠服，易衣而遁。追骑至，不识敞，便执绮衣兒。比究问知非，会日已暮，由是免。遂入一村，见长孙氏媪，踞胡床坐，敞再拜求哀，长孙氏愍之，藏于复壁之中。购之愈急，追且至，长孙氏资而遣之。遂诈为道士，变姓名，隐嵩高山。略涉经史。数年间，人颇异之。尝独坐岩石下，泫然叹曰：「吾岂终此乎！伍子胥独何人也？」乃奔长安。周文帝见而礼之，拜行台郎中、灵寿县伯。保定中，迁开府仪同三司，进爵为公。后为胶州刺史。迎长孙氏至其第，置于家，厚资给之。隋文帝受禅，改封边城郡公。黔安蛮叛，命敞讨平之。师旋，拜金州总管，政号严明，吏人惧之。后以年老乞骸骨，赐二马辂车归河内，卒于家。子最嗣。
仲远，彦伯弟也。明帝末年，尔硃荣兵威稍盛，诸有启谒，率多见从。而仲远摹写荣书，又刻荣印，与尚书令吏，通为奸诈。造荣启表，请人为官，大得财货，以资酒色。落魄无行业。及孝庄即位，封清河公、徐州刺史，兼尚书左仆射、三徐大行台。寻进督三徐诸军事。仲远上言：「窃见比来行台采募者，皆得权立中正，在军定第，斟酌授官。今求兼置，权济军要。若立第亦爽，关京之日，任有司裁夺」。诏从之。于是随情补授，肆意聚敛。
尔硃荣死，仲远勒其部众，来向京师。节闵立，进爵彭城王，加大将军，又兼尚书令，镇大梁。仲远遣使请准朝式，在军鸣驺。节闵帝览启，笑而许之。其肆情如此。复进督东道诸军事、本将军、衮州刺史，余如故。仲远天性贪暴，心如峻壑。大宗富族，诬之以反，没其家口，簿籍财物，皆以入己。丈夫死者，投之河流，如此者不可胜数。诸将妇有美色者，莫不被其淫乱。自荥阳以东，输税悉入其军，不送京师。时天光控关右，仲远在大梁，兆据并州，世隆居京邑，各自专恣，权强莫此。所在并以贪虐为事，于是四方解体。又加太宰，解大行台。仲远专恣尤剧，方之彦伯、世隆，最为无礼。东南牧守，下至人俗，比之豺狼，特为患苦。后移屯东郡，率众与度律等拒齐神武。尔硃兆领骑数千自晋阳来会。军次阳平，神武纵以间说，仲远等迭相猜贰，狼狈遁走。中兴二年，复与天光等于韩陵战败，南走。寻乃奔梁，死于江南。
世隆，字荣宗，仲远弟也。明帝末，兼直阁，加前将军。尔硃荣表请入朝，灵太后恶之，令世隆诣晋阳慰喻荣。荣因欲留之，世隆曰：「朝廷疑兄，故令世隆来。今遂住，便有内备，非计之善。」荣乃遣入。荣举兵南出，世隆遂走，会荣于上党。建义初，除给事黄门侍郎。庄帝之立，世隆预其谋，封乐平郡公。元颢逼大梁，诏为前将军、都督，镇武牢。颢既克荥阳，世隆惧而遁还，庄帝仓卒北巡。及车驾还宫，除尚书左仆射，摄选。
庄帝之将图尔硃荣，每屏人言。世隆惧变，乃为匿名书，自榜其门曰：「天子与侍中杨侃、黄门高道穆等为计，欲杀天柱。」还复自以此书与荣妻北乡郡公主，并以呈荣，劝其不入。荣毁书唾地曰：「世隆无胆，谁敢生心！」世隆又劝其速发。荣曰：「何忽忽？」皆不见从。
荣死，世隆奉荣妻，烧西阳门夜走。北次河桥，杀武卫将军奚毅，率众还战大夏门外。及李苗烧绝河梁，世隆乃北遁。攻建州克之，尽杀人以肆其忿。至长子，与度律等共推长广王晔为主。晔小名盆子，闻者皆以为事类赤眉。晔以世隆为尚书令，封乐平郡王，加太傅，行司州牧，会兆于河阳。兆既平京邑，让世隆曰：「叔父在朝多时，耳目应广，如何令天柱受祸？」按剑嗔目，词色甚厉。世隆逊辞拜谢，然后得已，而深恨之。
时仲远亦自滑台入京。世隆与兄弟密谋，虑元晔母干豫朝政，伺其母卫氏出行，遣数十骑如劫贼，于京巷杀之。公私惊愕，莫识所由。寻县榜，以千万钱募贼。百姓知之，莫不丧气。寻又以晔疏远，欲推立节闵帝。而度律意在南阳王，乃曰：「广陵不言，何以主天下？」后知能语，遂行废立。
初，世隆之为仆射，尚书文簿，在家省阅。性聪解，又畏荣，深自克勉，留心几案，傍接宾客，遂有解了之名。荣死之后，无所顾惮。及为令，常使尚书郎宋游道、邢昕在其宅听事，东西别座，受纳诉讼，称命施行。既总朝政，生杀自由，公行淫泆，信任群小，随情与夺。又兄弟群从，各拥强兵，割剥四海，极其贪虐。奸谄蛆酷，多见信用；温良名士，罕豫腹心。于是天下之人，莫不厌毒。世隆寻让太傅。节闵特置仪同三师之官，位次上公之下，以世隆为之。赠其父买珍相国、录尚书事、大司马。
及齐神武起义兵，仲远、度律等愚赣恃强，不以为虑，而世隆独深忧恐。及天光等败于韩陵，世