允文入对言：“今日有八可战。”上问及弃地，允文以笏画地，陈其利害。上曰：“此史浩误朕。”以敷文阁待制(职，从四品)知太平州，寻除兵部尚书(职事官，从二品)、湖北京西宣抚使(差遣)，改制置使。时朝廷遣卢仲贤使金议和，汤思退又欲弃唐、邓、海、泗四州，手诏谓唐、邓非险要，可置度外，允文五上疏力争。

思退怒，即奏曰：“此皆以利害不切于己，大言误国，以邀美名。宗社大事，岂同戏剧。”上意遂定。汤思退阳请召允文，实欲去之也。允文上印，犹以四州不可弃为请，乞致仕。诏以显谟阁学士(职，正三品)知平江府。思退竟决和议，割唐、邓。二年，金兵复至，思退贬，上悔不用允文言。陈俊卿亦荐允文堪大用，除端明殿学士(职，正三品)、同签书枢密院事(职事官，正二品)。

乾道元年(1165年)允文被召回临安，任参知政事(职事官，副宰相，正二品)兼知枢密院事(职事官，正二品)，乾道三年(1167年)，因为抗金名将吴璘病逝，虞允文被任为四川宣抚使兼知枢密院事，拜资政殿大学士(职，正三品)，以接替吴璘的职务。他治川时积极整顿正规军和民兵，并减缩军费开支。他于乾道五年(1169年)八月拜右仆射加同中书门下平章事(职事官，宰相，正一品)兼枢密使(职事官，从一品)，大力提拔贤良之士，如：胡铨、周必大、王十朋、赵汝愚、晁公武、李焘等人。

虞允文之死

乾道八年(1172年)二月授特进(文阶，第二阶，从一品)、左丞相(职事官，宰相，正一品)兼枢密使，但他随即要求镇抚四川，以图光复大业，同年秋，授少保(加官，三少，正一品)、武安军节度使(武阶官，从二品)、四川宣抚使(差遣)职务，进封雍国公(爵，从一品)，命其再度赴四川总理军政事务。他在到任一年多的时间里，不断筹划由四川出师北伐，以图光复中原，最终积劳成疾，淳熙元年(1174年)以病卒。

在淳熙四年(1177年)，宋孝宗诏赠虞允文太傅，谥忠肃。而宋孝宗在虞允文死去后便失去了收复中原的斗心，从此不再打算收复中原。但虞允文的报国事迹仍广为人传颂，名留青史。虞允文曾为唐书及五代史加注，并著有诗文十卷，经筵春秋讲义三卷、奏议二十二卷、内外志十五卷，传颂于世。