对于朝廷这一次为何召他返回临安，虞允文并不清楚，不过，能够面见赵眘，显然是他的机会，他也并不想舍弃。
他虽然被贬川陕，可是心中北伐之念却是从未消失，只不过自从北伐结束，两国议和之后，宋金之间的关系也逐渐变得融洽起来，因此，他这样的强硬派显然没有了用武之地！
对于沈堂，两人虽然没有见过面，但是同在川陕之地，他当然听过沈堂的名声。对于沈堂战场上的功绩，虞允文极为佩服，可是对于沈堂的作为，他却是并不认可，甚至是带着几分鄙夷和不屑。
在他看来，既然如此能征善战，甚至是用兵如神，不反攻金国反而与金国合作，这几乎是在卖国！他更是听说沈堂竟是娶了金国的郡主，对此他更是带着几分愤怒！所以，两人在川陕之地之所以未曾见面，其一是没有合适的机会，其二也是虞允文刻意避而不见的缘故。
尤其是这一次，他听闻沈堂因为儿女情长个之事，不仅辞官，而且直接去了金国，在他眼中，沈堂几乎成了敌人。若非有赵眘亲自下令，王权亲自前往利州，他恨不得要带兵直接将沈堂拦下来。
虽然他知道沈堂不好惹，可是，他身为川陕宣谕使，与大将吴璘交好！吴璘统帅利州一带兵马，他如果想要拦阻沈堂，几乎是轻而易举。
这一次他前来临安，最大的目的便是继续说服赵眘，让赵眘答应他的北伐之愿。
虞允文虽然是文臣，但是作风却更像是武将！他推崇以武治国，提倡提高将帅的待遇，所以，哪怕已经是年岁不小，可是依旧不喜欢坐轿，反而更喜好骑马！
他们先是做快船一路东来，而后又换了快马，没多久便是抵达了临安。
虞允文一行人刚刚停下，城门之内便是有一顶小轿急匆匆的迎了上来，轿子停下，一个老夫子打扮的男子下了轿，含笑迎上前。
“彬甫，你我自上次一别，到现在已经有两三年未见了。”老夫子大笑着说道。
见到来者，虞允文也露出几分笑意，“邦衡，你这老夫子还是这般矫情，怎么，在这临安城过了几天安稳日子，又搬出你那套来了？”
邦衡，名胡铨字邦衡，建炎二年进士！
少有才名，但是却命途坎坷！赵构知晓其才学，因此中进士之后便入朝为官任枢密院编修！
胡铨此人极为耿直、忠诚，对秦桧和高宗的苟且偷安极为愤怒，因此，上书高宗，请高宗处斩秦桧，否则，他将以死明志！
因为这次上书，胡铨在民间有了极大的名声，但是，也因此得罪了当时大权在握的秦桧。
秦桧认为胡铨狂妄凶悖，鼓众劫持，请朝廷下令贬黜！高宗赞同，直接将胡铨贬到昭州进行管制！后来因为不少同僚为胡铨说情，因此改判胡铨前往广州监管盐仓。一年之后，因为当时的户部尚书李弥逊暗中相助，又改判为威武军判官。
然而，仅仅过了两三年时间，朝廷之中便是再度有人弹劾胡铨，高宗怒，贬送新洲管制。