慧，斩于泉州。自馀支党，悉来降附，江南大定。上遣左领军将军独孤陀至浚仪迎劳。比到京师，问者日至。拜素子玄奖为仪同，赐黄金四十斤，加银瓶，实以金钱，缣三千段，马二百匹，羊二千口，公田百顷，宅一区。代苏威为尚书右仆射，与高颎专掌朝政。
素性疏而辩，高下在心，朝臣之内，颇推高颎，敬牛弘，厚接薛道衡，视苏威蔑如也。自馀朝贵，多被陵轹。其才艺风调，优于高颎，至于推诚体国，处物平当，有宰相识度，不如颎远矣。
寻令素监营仁寿宫，素遂夷山堙谷，督役严急，作者多死，宫侧时闻鬼哭之声。及宫成，上令高颎前视，奏称颇伤绮丽，大损人丁，高祖不悦。素尤惧，计无所出，即于北门启独孤皇后曰：“帝王法有离宫别馆，今天下太平，造此一宫，何足损费！”后以此理谕上，上意乃解。于是赐钱百万，锦绢三千段。
十八年，突厥达头可汗犯塞，以素为灵州道行军总管，出塞讨之，赐物二千段，黄金百斤。先是，诸将与虏战，每虑胡骑奔突，皆以戎车步骑相参，舆鹿角为方阵，骑在其内。素谓人曰：“此乃自固之道，非取胜之方也。”于是悉除旧法，令诸军为骑阵。达头闻之大喜，曰：“此天赐我也。”因下马仰天而拜，率精骑十余万而至。素奋击，大破之，达头被重创而遁，杀伤不可胜计，群虏号哭而去。优诏褒扬，赐缣二万匹，及万钉宝带。加子玄感位大将军，玄奖、玄纵、积善并上仪同。
素多权略，乘机赴敌，应变无方，然大抵驭戎严整，有犯军令者立斩之，无所宽贷。每将临寇，辄求人过失而斩之，多者百余人，少不下十数。流血盈前，言笑自若。及其对阵，先令一二百人赴敌，陷阵则已，如不能陷阵而还者，无问多少，悉斩之。又令三二百人复进，还如向法。将士股忄栗，有必死之心，由是战无不胜，称为名将。素时贵幸，言无不从，其从素征伐者，微功必录，至于他将，虽有大功，多为文吏所谴却。故素虽严忍，士亦以此愿从焉。
二十年，晋王广为灵朔道行军元帅，素为长史。王卑躬以交素。及为太子，素之谋也。
仁寿初，代高颎为尚书左仆射，赐良马百匹，牝马二百匹，奴婢百口。其年，以素为行军元帅，出云州击突厥，连破之。突厥退走，率骑追蹑，至夜而及之。将复战，恐贼越逸，令其骑稍后。于是亲将两骑，并降突厥二人，与虏并行，不之觉也。候其顿舍未定，趣后骑掩击，大破之。自是突厥远遁，碛南无复虏庭。以功进子玄感位为柱国，玄纵为淮南郡公。赏物二万段。
及献皇后崩，山陵制度，多出于素。上善之，下诏曰：
君为元首，臣则股肱，共治万姓，义同一体。上柱国、尚书左仆射、仁寿宫大监、越国公素，志度恢弘，机鉴明远，怀佐时之略，包经国之才。王业初基，霸图肇建，策名委质，受脤出师，擒剪凶魁，克平虢、郑。频承庙算，扬旍江表，每禀戎律，长驱塞阴，南指而吴越肃清，北临而獯猃摧服。自居端揆，参赞机衡，当朝正色，直言无隐。论文则词藻纵横，语武则权奇间出。既文且武，唯朕所命，任使之处，夙夜无怠。献皇后奄离六宫，远日云及，茔兆安厝，委素经营。然葬事依礼，唯卜泉石，至如吉凶，不由于此。素义存奉上，情深体国，欲使幽明俱泰，宝祚无穷。以为阴阳之书，圣人所作，祸福之理，特须审慎。乃遍历川原，亲自占择，纤介不善，即更寻求，志图元吉，孜孜不已。心力备尽，人灵协赞，遂得神皋福壤，营建山陵。论素此心，事极诚孝，岂与夫平戎定寇比其功业？非唯廊庙之器，实是社稷之臣，若不加褒赏，何以申兹劝励？可别封一子义康郡公，邑万户，子子孙孙，承袭不绝。馀如故。
并赐田三十顷，绢万段，米万石，金钵一，实以金，银钵一，实以珠，并绫锦五百段。
时素贵宠日隆，其弟约、从父文思、弟文纪，及族父异，并尚书列卿。诸子无汗马之劳，位至柱国、刺史。家僮数千，后庭妓妾曳绮罗者以千数。第宅华侈，制拟宫禁。有鲍亨者，善属文，殷胄者，工草隶，并江南士人，因高智慧没为家奴。亲戚故吏，布列清显，素之贵盛，近古未闻。炀帝初为太子，忌蜀王秀，与素谋之，构成其罪，后竟废黜。朝臣有违忤者，虽至诚体国，如贺若弼、史万岁、李纲、柳彧等，素皆阴中之。若有附会及亲戚，虽无才用，必加进擢。朝廷靡然，莫不畏附。唯兵部尚书柳述，以帝婿之重，数于上前面折素。大理卿梁毗，抗表上言素作威作福。上渐疏忌之，后因出敕曰：“仆射国之宰辅，不可躬亲细务，但三五日一度向省，评论大事。”外示优崇，实夺之权也。终仁寿之末，不复通判省事。上赐王公以下射，素箭为第一，上手以外国所献金精盘，价直巨万，以赐之。四年，从幸仁寿宫，宴赐重叠。
及上不豫，素与兵部尚书柳述、黄门侍郎元岩等入閤侍疾。时皇太子入居大宝殿，虑上有不讳，须豫防拟，乃手自为书，封出问素。素录出事状以报太子。宫人误送上所，上览而大恚。所宠陈贵人又言太子无礼。上遂发怒，欲召庶人勇。太子谋之于素，素矫诏追东宫兵士帖上台宿卫，门禁出入，并取宇文述、