赵构贴身侍卫，南宋七王之一，独掌禁军三十年，却被人骂为阉人！(9)

杨沂中见秦桧有如此“扭转乾坤”的能力，便义无反顾地靠近秦桧。在不断有人行刺秦桧的情况下，召见，杨沂中可直入秦桧的内堂，可见与秦桧之关系非比寻常。时人对杨沂中的这种行为嗤之以鼻，其外号就从“髯将军”变成了“髯阉”。所谓“髯阉”，是说杨沂中尽管身体是完整的，但其精神却遭到了秦桧的阉割，堕落为逢迎无耻之徒。
杨沂中不断靠近秦桧，引起了赵构的反感。杨沂中自建炎二年任神武中军统制一职，至绍兴二十八年领殿前都指挥使职事，在高宗身边三十余载，替赵构掌管禁军三衙，不可谓之不信任。赵构曾言：“朕于存中，扶绥之过于子弟。”但正是由于杨沂中特殊的职位，以及与赵构亲密的隶属关系，当他主动靠近秦桧时，赵构曾经对他的信任，很快便不复存在。
绍兴三十一年，二月。金主完颜亮蓄意南侵，杨沂中上奏十条防范金人的举措，正好触及了高宗的和议政策，引起了高宗的不快。而此时朝堂之上，已经有人对杨沂中掌管禁军三十年十分不满，认为久居其位，必蓄其志。提议应当罢免杨沂中，赵构心中已有此意，以“喜功生事”为由罢免了杨沂中，由赵密代领杨沂中殿前都指挥使一职，杨沂中奉朝请，被解除了兵权。杨沂中被罢免后，赵构假惺惺的言道：“杨存中之罢，朕不安寝者三夕。”如此言辞，不过是虚掩其事罢了。

不过很快赵构就不得不厚着脸皮，把杨沂中再次请回来。绍兴三十一年，十月，金主完颜亮南侵，淮西统制王权无能之辈，致使金军从容而进，如入无人之境，不到半月两淮尽失，金军饮马长江。形势迫在眉睫，南宋初期参与抗击金人的将领大多已去世，唯一在世且极具威望的只有杨沂中，赵构迫不得已只得再次起用杨沂中。
杨沂中以身犯险，与中书舍人虞允文一同驾舟冒险探金军大营。身为三十年禁军老将的影响力还是有的，驻守采石矶的宋军士兵见杨沂中亲自督战，士气为之大振，虽然杨沂中没有直接参与采石之战，但是他的出现为之后虞允文在采石之战击败金军创造了有利条件。赵构巧言道：“杨存中忠无与二。朕之郭子仪也”，也不知道这假惺惺的话是说给谁的听的！