伯顏說：“我們皇上（指元世祖）的意思很清楚，并不是要消滅宋朝。”

　　文天祥說：“既然是這樣，那么請你們立刻把軍隊撤退到平江或者嘉興。如果你們硬要消滅我朝，南方軍民一定跟你們打到底，對你們未必有好處。”

　　伯顏把臉一沉，用威脅的口氣說：“你們再不老實投降，只怕饒不得你們。”

　　文天祥也氣憤地說：“我是堂堂南宋宰相。現在國家危急，我已經準備好拼一死報答國家，哪怕刀山火海，我也毫不害怕。”

　　文天祥洪亮的聲音，莊嚴的語言，把伯顏的威脅頂了回去。周圍的元將個個嚇得驚奇失色。

　　雙方會見之后，伯顏傳出話來，讓別的使者先回臨安去跟謝太后商量，卻把文天祥留下來。文天祥知道伯顏不懷好意，向伯顏抗議。伯顏裝出若無其事的樣子說：“您別發火。

　　兩國和議大事，正需要您留下商量嘛。”

　　隨同文天祥到元營的吳堅、賈余慶回到臨安，把文天祥拒絕投降的事回奏謝太后。謝太后一心投降，改任賈余慶做右丞相，到元營去求降。伯顏接受降表后，再請文天祥進營帳，告訴他朝廷已另外派人來投降。文天祥氣得把賈余慶痛罵一頓，但是投降的事已無法挽回了。

　　公元１２７６年，伯顏帶兵占領臨安。謝太后和趙顯出宮投降，元軍把趙顯當作俘虜押送大都（今北京市），文天祥也被押到大都去。一路上，他一直在考慮怎樣從敵人手里逃脫。路過鎮江的時候，他和幾個隨從人員商量好，瞅元軍沒防備，逃出了元營，乘小船到了真州。

　　真州的守將苗再成聽到文丞相到來，十分高興，打開城門迎接。苗再成從文天祥那里知道臨安已經陷落，表示愿意跟文天祥一起，集合淮河東西的兵力，打退元兵。

　　文天祥正在高興，哪兒知道守揚州的宋軍主帥李庭芝聽信謠言，以為文天祥已經投降，是元軍派到真州去的內奸　命令苗再成把他殺死。苗再成不相信文天祥是這樣的人，但是又不敢違抗李庭芝的命令，只好把文天祥騙出真州城外，把揚州的來文給他看了，叫文天祥趕快離開。

　　文天祥沒辦法，又帶著隨從連夜趕到揚州。第二天天沒亮，到了揚州城下，等候開門進城。城門邊一些等著進城的人坐著沒事都在閑談。文天祥一聽，知道揚州正在懸賞緝拿他，不能進城了。

　　文天祥等十二個人為了免得被緝拿，改名換姓，化了裝，專揀僻靜的小路走，想往東到海邊去，找船向南轉移。

　　十幾個人走了一程，正遇到一隊元朝的騎兵趕了上來。他們躲進一座土圍子里，幸虧沒被元兵發現。

　　文天祥等日行夜宿，歷盡千難萬險，終于在農民的幫助下，從海口乘船到了溫州。在那兒，他得到張世杰和陳宜中在福州擁立新皇帝即位的消息，就決定到福州去。