北征许洛。将发，坠马，时咸恶之。既而以淮南太守陈逵、兗州刺史蔡裔为前锋，安西将军谢尚、北中郎将荀羡为督统，开江西田千余顷，以为军储。师次寿阳，潜诱苻健大臣梁安、雷弱兒等，使杀健，许以关右之任。初，降人魏脱卒，其弟憬代领部曲。姚襄杀憬，以并其众，浩大恶之，使龙骧将军刘启守谯，迁襄于梁。既而魏氏子弟往来寿阳，襄益猜惧。俄而襄部曲有欲归浩者，襄杀之，浩于是谋诛襄。会苻健杀其大臣，健兄子眉自洛阳西奔，浩以为梁安事捷，意苻健已死，请进屯洛阳，修复园陵，使襄为前驱，冠军将军刘洽镇鹿台，建武将军刘遁据仓垣，又求解扬州，专镇洛阳，诏不许。浩既至许昌，会张遇反，谢尚又败绩，浩还寿阳。后复进军，次山桑，而襄反，浩惧，弃辎重退保谯城，器械军储皆为襄所掠，士卒多亡叛。浩遣刘启、王彬之击襄于山桑，并为襄所杀。
桓温素忌浩，及闻其败，上疏罪浩曰：
案中军将军浩过蒙朝恩，叨窃非据，宠灵超卓，再司京辇，不能恭慎所任，恪居职次，而侵官离局，高下在心。前司徒臣谟执义履素，位居台辅，师傅先帝，朝之元老，年登七十，以礼请退，虽临轩固辞，不顺恩旨，适足以明逊让之风，弘优贤之礼。而浩虚生狡说，疑误朝听，狱之有司，将致大辟。自羯胡夭亡，群凶殄灭，而百姓涂炭，企迟拯接。浩受专征之重，无雪耻之志，坐自封植，妄生风尘，遂使寇仇稽诛，奸逆并起，华夏鼎沸，黎元殄悴。浩惧罪将及，不容于朝，外声进讨，内求苟免。出次寿阳，顿甲弥年，倾天府之资，竭五州之力，收合无赖，以自强卫，爵命无章，猜害罔顾。故范丰之属反叛于芍陂，奇德、龙会作变于肘腋。羌帅姚襄率众归化，遣其母弟入质京邑，浩不能抚而用之，阴图杀害，再遣剌客，为襄所觉。襄遂惶惧，用致逆命。生长乱阶，自浩始也。复不能以时扫灭，纵放小竖，鼓行毒害，身狼狈于山桑，军破碎于梁国，舟车焚烧，辎重覆没。三军积实，反以资寇，精甲利器，更为贼用。神怒人怨，众之所弃，倾危之忧，将及社稷。臣所以忘寝屏营，启处无地。夫率正显义，所以致训，明罚敕法，所以齐众，伏愿陛下上追唐尧放命之刑下鉴《春秋》无君之典。若圣上含弘，末忍诛殛，且宜遐弃，摈之荒裔。虽未足以塞山海之责，粗可以宣诫于将来矣。
竟坐废为庶人，徙于东阳之信安县。
浩少与温齐名，而每心竞。温尝问浩：“君何如我？”浩曰：“我与君周旋久，宁作我也。”温既以雄豪自许，每轻浩，浩不之惮也。至是，温语人曰：“少时吾与浩共骑竹马，我弃去，浩辄取之，故当出我下也。”又谓郗超曰：“浩有德有言，向使作令仆，足以仪刑百揆，朝廷用违其才耳。”
浩虽被黜放，口无怨言，夷神委命，谈咏不辍，虽家人不见其有流放之戚。但终日书空，作“咄咄怪事”四字而已。浩甥韩伯，浩素赏爱之，随至徙所，经岁还都，浩送至渚侧，咏曹颜远诗云：“富贵他人合，贫贱亲戚离。”因而泣下。后温将以浩为尚书令，遗书告之，浩欣然许焉。将答书，虑有谬误，开闭者数十，竟达空函，大忤温意，由是遂绝。永和十二年卒。
子涓，亦有美名，咸安初，桓温废太宰、武陵王晞，诬涓及庾倩与晞谋反，害之。
浩后将改葬，其故吏顾悦之上疏讼浩曰：
伏见故中军将军、扬州刺史殷浩体德沈粹，识理淹长，风流雅胜，声盖当时，再临神州，万里肃清，勋绩茂著，圣朝钦嘉，遂授分陕推毂之任。戎旗既建，出镇寿阳，驱其豺狼，翦其荆棘，收罗向义，广开屯田，沐雨栉风，等勤台仆。仰凭皇威，群丑革面，进军河洛，修复园陵。不虞之变，中路猖蹶，遂令为山之功崩于垂成，忠款之志于是而废。既受削黜，自摈山海，杜门终身，与世两绝，可谓克己复礼，穷而无怨者也。寻浩所犯，盖负败之常科，非即情之永责。论其名德深诚则如彼，察其补过罪己则如此，岂可弃而不恤，使法有余冤！方今宅兆已成。埏隧已开，悬棺而窆，礼同庶人，存亡有非命之分，九泉无自诉之斯，仰感三良，昊天罔极。若使明诏爰发，旌我善人，崇复本官，远彰幽昧，斯则国家威恩有兼济之美，死而可作，无负心之恨。
疏奏，诏追复浩本官。
顾悦之，字君叔，少有义行。与简文同年，而发早白。帝问其故。对曰：“松柏之姿，经霜犹茂；蒲柳常质，望秋先零。”简文悦其对。始将抗表讼浩，浩亲故多谓非宜，悦之决意以闻，又与朝臣争论，故众无以夺焉。时人咸称之。为州别驾，历尚书右丞，卒。子凯之，别有传。
蔡裔者，有勇气，声若雷震。尝有二偷入室，裔拊床一呼，而盗俱陨，故浩委以军锋焉。
史臣曰：陆晔等并以时望国华，效彰历试，迭居端揆，参掌机衡。然皆率由旧章，得免祗悔。而充抗言孺子，虽屈压于权臣，翊奉储君，竟导扬于末命，频参大议，屡画嘉谋，可谓忠贞在斯而已。殷浩清徽雅量，众议攸归，高秩厚礼，不行而至，咸谓教义由其兴替，社稷俟以安危。及其入处国钧，未有嘉谋善政，出总戎律，唯闻蹙国丧师，是知风流异贞固之才，谈论