與此同時(shí)，張浚還解除了劉光世的兵權(quán)。皆因劉光世平日里不僅花天酒地，沉迷于酒色，并且大吃空額，只知斂財(cái)，根本不理軍務(wù)。更重要的是，他的軍隊(duì)除了撓民之外，全無(wú)一點(diǎn)用處，幾次與金人作戰(zhàn)，全都是不戰(zhàn)而敗。

趙云樺則認(rèn)為劉光世出身武將世家，樹(shù)大根深，怕影響士氣，不能隨意免去他的軍職，以免帶來(lái)意想不到的后果。

趙鼎的想法也與趙云樺一樣，認(rèn)為劉光世在淮西的勢(shì)力厐大，并不同意朝廷免去他的軍職，但他此時(shí)已經(jīng)辭相，張浚更是不會(huì)聽(tīng)他的勸告，繼續(xù)我行我素。