李泌见大事已定，自己年纪亦太老，便上表告老回乡去了。
谁知李泌才回到家中不多几天，那朝中的黄门官，便奉着圣旨，接二连三地召李泌进京去。如今李泌年老龙钟，再三辞谢，不肯入朝。德宗便派亲信大臣，就李泌家中计议。原来这时吐蕃集合羌浑，大举入寇陇州，连营数十里，关中震动，连京城百姓，一齐恐慌起来。西边将士，多坚壁自守，不敢出战。
陇右人民，尽被掳掠，丁壮妇女，悉受蕃人的奸污，选那年轻的，齐掳回营去享用。那些老弱百姓，大半被他断手凿目，抛掷路旁。同时云南、大食、天竺各部落，都与吐蕃响应，骚扰中国内地。德宗连得警报，无计可施，便又想起李泌来。派亲信大臣去问退兵之计。那李泌说道：“这事容易，吐蕃心目中最惧怕的，便是回纥国；如今俺只须遣一使去与回纥连和，那吐蕃闻知，必惊骇而退。”