在淮西之战过程中，大将刘光世竟一度舍庐州而退兵。张浚得知后大怒，当即遣人连夜驰往刘光世军营，对其旗下将士宣布“若有一人敢渡江退避，即斩以徇”并一直监督刘光世返回庐州。击退伪齐兵后，张浚请求乘胜直取河南地，以擒刘豫父子，并向赵构进言说刘光世骄惰不战，不可为大将，请将其罢免。
赵构便问他“卿可与赵鼎议过此事”
张浚说“还没有。”随后找到赵鼎与他商量擒灭刘豫及罢用刘光世之事，但赵鼎并不赞同，说“不可。刘豫倚金人为重，但不知擒灭刘豫，得了河南地，就可使金人不内侵了么刘光世出身将门世家，士卒多出其门下，若无故罢之，恐失人心，惹来非议。”
张浚闻后颇为不悦。赵鼎施政行事一向以固本为先，不喜冒进，继续称国内兵力未到完全可与敌抗衡的时候，目前还是以自守为宜。见赵鼎主张与自己格格不入，张浚便有了排挤赵鼎之心。
在张浚示意下，左司谏陈公辅很快进言奏劾赵鼎。赵鼎早知当下事态不利于己，遂屡次向赵构辞官求去。赵构亦知他是受张浚排挤才辞官，虽未极力挽留，但却愀然不乐地对赵鼎说“卿不必远行，只留在绍兴，朕他日有用卿处。”
绍兴六年十二月壬寅，尚书左仆射、同中书门下平章事兼知枢密院事、都督诸路军马兼监修国史赵鼎罢，充观文殿大学士、两浙东路安抚制置大使，兼知绍兴府。
绍兴七年春正月癸亥朔，赵构接受张浚建议，在平江下诏移跸建康，准备二月启行。此后不久任翰林学士陈与义为参知政事，资政殿学士沈与求同知枢密院事。张浚改兼枢密使，并引荐秦桧入朝为枢密使。
一日晚张浚入宫面圣，赵构问起各将所领军队的近况，张浚蹙眉叹息，说“而今诸将虽御敌有功，但多少都有些恃功而骄，未必总听朝廷号令，且有把官兵变为私兵之势。”
赵构追问详细情况，张浚遂道“陛下复国于危难之间，初年外受金人威胁，内有流寇、乱民兴兵之祸，官兵数目有限，因此陛下默许诸将在平内乱时将国内流寇溃兵整编入伍，也是不得已之举。现在这样的杂军渐渐集中到几位大将麾下，控制多年，那些兵卒越来越不像官兵，只听自己将领号令，倒更像是诸将的私兵。平日众军相称必称某姓某家之兵，张俊的叫张家军，刘光世的叫刘家军，岳飞的叫岳家军，其余杨沂中、韩世忠、吴玠、吴璘等人的军队亦莫不如是，长此以往，必将不利于朝廷调遣指挥。”
赵构颔首“这些朕亦有耳闻。此外，朕还听说，诸将以充实军费为名，擅自以军队经商，侵夺国家财利。”
张浚道“正是。陛下即位以来一向重视安抚嘉奖有功之将，常赐他们高官厚禄及土地财物，诸将中杨沂中、吴玠、吴璘及岳飞都官拜两镇节度使，张俊、刘光世、韩世忠甚至加至三镇，诸将权势渐增，行事也日趋嚣张，不仅经商与国争利，甚至有人还纵容麾下兵卒抢劫平民百姓，有损宋军声誉。国家中兴固然需要武将建功，但一味扶持而不加以抑制，任其势力坐大却非朝廷之福，也有悖以文御武的祖宗遗训。”
赵构细思片刻，再问他“依卿之见，该当如何”
张浚一拱手，道“陛下，臣以为已到谋收内外兵柄的时候了。”
赵构淡看张浚，目光宁和，不露喜忧“卿是宰相，又掌军权，有些事可自行处理。”
张浚心领神会，躬身道“谢陛下。”
与张浚议完事，赵构回到寝宫，却见婴茀面前跪着两名侍女，婴茀正在命内侍将她们各掌嘴二十。
赵构问缘故，婴茀叹道“臣妾管教不严，宫中侍女又随意说话，影响福国长公主清誉。”
赵构怫然问“她们又说什么”
婴茀说“公主适才为官家煲了些莲子汤，亲自送去给官家，也许是见官家正在与张相公议事，便在门外等了等。但这些婢女当真可恶，看见后居然私下议论，说公主一直在门外凝神细听，专注如此，必是因张相公的缘故”
赵构早已听得面色阴沉，再问“关张浚何事”
婴茀答“这两个无知婢女又能说出什么好话来无非是说张相公治国有方，人才又好，所以公主见是他与官家议事，便听得格外仔细都是一些混话。官家终日忧国忧民，公主耳濡目染，关心一点国家大事也很自然，却无端受这些贱人非议，臣妾当然应为公主责罚她们，掌嘴二十，应该不为过罢”
赵构转目凝视她，冷道“掌嘴二十轻了。杖责三十。”
第四章陈王宗隽雪来香异第三节飘雨
由此可知，柔福一直在门外偷听他与张浚的谈话。赵构大感不快，却也并未因此责骂于她，甚至在她面前毫不提及此事。这样的事几日后再度发生。当日赵构白天接见了出使金国归来的问安使何藓与范宁，当晚便召秦桧入宫议事。两人商议片刻后，赵构偶然侧首间发现门外有一熟悉的女子身影短促一晃，随即隐于壁间，当即便朗声命令殿内内侍“开门，请福国长公主进来。”
门一开，柔福亦不躲避，施施然走进，漠然一瞥秦桧，再向赵构行礼。
倒是秦桧有些尴尬，垂首不敢看她。赵构挥手命他告退，秦桧遂迅速离开。
出了门，想起适才柔福那冰冷的眼神，秦桧心中颇不自在。低着头走路，行到院中，才发现天已开始下雨，虽不甚大，但天寒地冻的，雨水一层层掩落于脸上身上，却也阴冷刺骨。
正以袖遮首疾步走着，忽听见身后有人喊“秦大人留步。”
停下回望，见是一宫女持伞朝他跑来。跑至面前屈膝一礼，对他说“秦大人，吴才人吩咐奴婢为大人撑伞送大人上马车。”
“吴才人”秦桧先有一愣，随即忙满面堆笑地说“如此有劳姑娘。请姑娘回头替我谢过吴才人。”