徐荣叟亦抗章引去，公许奏：「乞还言官，俾安厥位。」既而史嵩之自江上入相，台谏谢方叔、王万及磊卿相继他徙，公许又奏：「外难凭陵，国势岌若缀旒，朝廷上自为弗靖，阳为迁除，阴夺言职，此中外所以怏怏。」
迁将作少监。大旱，应诏疏时事四条。又言：「储极虚位，天下寒心。」时朝廷令侍从、台谏条具易楮利害，寻降旨以新造十八界折五行使。公许缴申省，谓：「庙堂决意更革，本欲重十八界，亦当令十六界、十七界稍有分别，若一时皆以五折一，安保将来十七界与十八界并行而不折阅乎。曷若将十七界且以三兑一，使民间尚知宝此一界，不至一旦贸易不行，令三界各有等第，庶几公私两便。」嵩之格不行，径揭黄榜。公许谓：「不经凤阁鸾台，不得为敕。朝廷出令而宰相擅行如此，则掖垣可废。」累上奏牍，径欲引去，宗勉及参知政事游似面奏留之，兼国史编修、实录检讨。
淳祐元年，迁秘书少监，轮对，言蜀事十条。兼直学士院，拜太常少卿，力请外，为右正言濮斗南之所论罢。寻以直宝谟阁知袁州，请蠲和籴之半。改命郡吏部总所纲运，而厚其赀，免募平民，民甚便之。新周敦颐祠，葺张栻书院，聘宿儒胡安之为诸生讲说。杜范荐于上，召拜宗正少卿，再迁起居舍人。濮斗南缴还，疏有「臣等耻与为伍」之语，遂以旧职提举玉局观。范见疏曰：「程季与肯与汝为伍耶？」
退处二年，召赴行在，属嵩之以父忧去位，经营起复，益惮公许，密柬韩祥嗾殿中侍御史王赞奏寝召命。帝虽曲从而意不悦。及逐不才台谏，擢公许起居郎兼直学士院。公许入奏不可不坚凝者七。帝语之曰：「卿一去三年，今用卿，出自朕意。」是日晚命下，嵩之罢起复，相范钟及范，三制皆公许为之。兼权中书舍人。
时二相尚逊，机务多壅。公许奏：「辅臣崇执谦逊，避远形迹，相示以色而不明言，事几无穷，日月易失。今最急莫若疆场之事，帅才不蓄，一旦欲议易置，茫然莫知所付。九江择守，至以近所废斥朋附为欺之台察充其选。同时任言责者，虽心迹有显晦，过恶有重轻，而获罪于清议则同。一人抆拭之骤若是，三人者宁不引领以望玷缺之复。况近者言官方以刘晋之、郑起潜、濮斗南三人乞明正其罪，以示警戒，而忽闻龚基先之用，议者咸谓改纪之初，所为错缪，邪枉窥伺善类，何可高枕而卧。」帝见公许疏称善，且言基先之用太早。
右史徐元杰暴亡，司谏谢方叔、御史刘应起言，不报。公许亟奏曰：「正月，侍御史刘汉弼死。四月，右丞相杜范死。六月，右史徐元杰死。汉弼之死固可疑，范之死人言已籍籍，然汉弼类风淫末疾，范亦尪弱多病，诿曰天命，犹可也。元杰气体魁硕，神采严毅，议论英发，甫闻谒告，奄至暴亡，口鼻四体变异之状，使人为之雪涕不已。六馆诸生叩阍告，陛下始命有司置狱鞫勘，谓当于朝绅中选公正明决无所顾忌者专莅其事，尽情研究，务使得实。集议朝堂，分列首从，必诛无赦。」疏入，不报。物论沸腾，临安尹赵与ＴＰ奏乞置狱天府，帝从之。公许缴奏：「与ＴＰ乃嵩之死党，乞改送大理寺，命台臣董之。」诏殿中侍御史郑寀，寀回懦首鼠，事竟不白，然公论莫不伟公许。
权礼部侍郎，差充执绥官。郑起潜、刘晋之及陈一荐以台臣论劾迁谪，公许疏其附下罔上之罪，乞下各州军严行押发。郑清之以少保奉祠，侍讲幄中，批复其子士昌官职，与内祠，且许侍养行在所。盖士昌尝以诏狱追逮，或云诈以死闻，清之造阙，泣请于帝，故有是命。公许缴奏：「士昌罪重，京都浩穰，奸宄杂糅，恐其积习沉痼，重为清之累；莫若且与甄复，少慰清之，内祠侍养之命宜与收寝。」帝密遣中贵人以公许疏示清之。项容孙以罪遣还家，道死，时叙官复职，公许驳奏，命遂格。
迁中书舍人，进礼部侍郎。嵩之免丧，以观文殿大学士提举洞霄宫，台谏、给舍交章论奏，公许疏：「乞睿断亟下明诏，正邦典。」殿中侍御史章琰、正言李昴英以论执政及府尹，帝怒，出二人，公许力争之。公许自缴士昌之命，清之日夜于经筵短公许。周坦妻与清之妻善，因拜坦殿中侍御史。坦首疏劾公许，以宝章阁待制知建宁府；谏议大夫郑寀又劾之，命遂寝。
清之再相，公许屏居湖州者四年，再提举玉隆观、差知婺州，未上；帝欲召为文字官，清之奏已令守婺，帝曰：「朕欲其来。」乃授权刑部尚书，屡辞弗获。入对，上疏货财，兴缮、逐谏臣、开边衅时弊七事，荐知名士二十九人。
时罢京学类申，散遣生徒，公许奏：「京学养士，其法本与三学不侔。往者立类申之法，重轻得宜，人情便安，近一旦忽以乡庠教选而更张之，为士亦当自反，未可尽归咎朝廷也。令行之始，臣方还朝，未敢强聒以挠既出之令。今士子扰扰道途，经营朝夕，今既未能尽复旧数，莫若权宜以五百为额，仍用类申之法，使远方游学者，得以肄习其间。京邑四方之极，而庠序一空，弦诵寂寥，遂使逢掖皇皇，市廛昉怨而不敢议，非所以作成士气、尊崇教化也。」清之益不乐。授稿殿中侍御史陈