劉備無奈接受了奪取巴蜀無望的現實後，率軍返回了公安縣，但對於劉備來說，現在不僅是奪取巴蜀無望，而且他在荊南也呆不下去了，劉璟已經明確向他提出了用荊南換關羽的條件，問題並不在關羽身上，而是在於劉璟的態度。
劉璟已經明確提出了收回荊南的要求，就算沒有關羽，他也將用武力奪回荊南四郡，衡陽、武陵、零陵、桂陽，還有湘東和臨賀兩個小郡，這是他劉備的最後基業，如果劉璟要收回，那他該怎麼辦？難道真的只能去交州？
劉備一路憂慮忡忡，這天中午，他率領軍隊終於抵達了公安縣，城門口，諸葛亮率領眾官迎了出去，此時諸葛亮已經知道關羽奪船失敗被俘的消息。
雖然關羽並沒有按照他的計謀在夜間突擊登陸後再奪船，而是用陸戰的方式反覆試探，結果給了對方準備機會，以至於失敗被俘，但諸葛亮並不想因此推卸自己的責任。
但讓諸葛亮更加黯然的是巴蜀計畫徹底失敗，使他奪取巴蜀，三分天下的大計成為泡影，說到底是他們實力不濟，他們南撤長江以南後，便再也沒有機會參與戰略角逐，也就無法在赤壁大戰後分一杯羹。
正是赤壁大戰的戰果，使劉璟迅速強大起來，再次擊敗了江東的野心，對於眼前的危局，諸葛亮心知肚明，他也知道，他需要和劉備好好談一談了。
「微臣諸葛亮參見主公！」諸葛亮走上前，向劉備深深行一禮。
劉備疲憊的擺擺手，「先生不必多禮，備有很多話想和先生詳談，我們先進城吧！」
「主公請上車！」
劉備將軍隊交給了關羽，他改乘馬車，跟著諸葛亮的馬車一起坐車進了城。
馬車內，劉備透過車窗靜靜地望著公安新城，這座他剛剛建立的新都城，很多房屋還沒有最後完工，新都城內的居民一大半都是來自對岸的江陵，他們滿懷希望建設自己的新家園。
一群群孩子快樂地從他馬車旁跑過，民居屋頂的煙囪里正裊裊冒著炊煙，十幾名婦女正聚在一口水井旁洗衣淘米，笑聲不斷傳來，一切都是那麼生機勃勃，可惜，他劉備將不得不放棄了。
劉備長長地嘆了口氣，眼睛裡充滿了對這座城池的眷戀……
回到自己官房，劉備命令所有親衛都退下，房間里只剩下他和諸葛亮兩人，沉思片刻，劉備開口打破了房間里的沉默，「這時劉璟在秭歸給我的親筆信，軍師先看看吧！」
劉備將劉璟的親筆信遞給了諸葛亮，諸葛亮接過信默默地看了一遍，他合上信道：「亮的第一個請求，是希望主公撤去亮軍師之職，以懲處亮在江陵之敗的責任，亮願以幕僚身份繼續輔佐主公。」
劉備搖了搖頭，嘆息道：「江陵之敗和先生無關，是司馬懿援軍及時趕到，也是二弟未能貫徹軍師夜奪水寨的策略導致，如果一定要說責任，那是我的責任，我沒有給先生足夠的軍權。」
諸葛亮正要開口，劉備卻一擺手打斷了他，有些不悅道：「現在正是我們危難之時，希望軍師與我同心合力，共渡危難，而不要再給我施加壓力了。」
諸葛亮心中暗嘆，他只得長身施一禮，「亮願鞠躬盡瘁，為主公分憂解難。」
「好吧！先生說說劉璟這封信，我該如何應對？」
諸葛亮沉思片刻道：「劉璟取巴蜀的意圖已經很明顯了，不過他也不想太過於急躁，我估計他會休養生息一段時間後，再對巴蜀動手，如果我沒有猜錯，他一定會利用東州士和巴蜀本土系的矛盾引發益州內亂，給他進軍巴蜀找到借口，但在進巴蜀之前，他一定會先取荊南。」
劉備頹然地坐下，之前是他自己的猜想，但他多少還抱有一線希望，但現在是從諸葛亮口中說出，意義就不一樣了，劉備就像被判處極刑一般，臉色晦暗，神情沮喪之極，半晌，他嘶啞著聲音問道：「就沒有一點希望了嗎？」
諸葛亮搖了搖頭，「劉璟原本是希望江東攻取荊南，然後他再從江東手中奪取，畢竟是劉琦的封地，但我估計他會要求朝廷明確荊州的範圍，或者封他為桂陽太守，這樣便可以名正言順進兵了。」
這番話就彷彿寒冬里的一縷春風，讓劉備已經枯萎的心頓時又迸出一線生機，他急忙問道：「軍師以為曹操會答應嗎？」
諸葛亮半晌說不出話，他也感覺到了劉備的絕望和期待，他不忍心再直言傷害到劉備，只得以沉默應對，劉備呆了一下，苦笑道：「有什麼話軍師就直說，我還不至於那麼脆弱。」
「其實曹操封主公為交州牧，就已經默許劉璟對荊南四郡的擁有，只是劉璟顧及到劉琦的影響，才遲遲沒有動手，但這並不代表他不要荊南，用關將軍來換取荊南，也是他的一種姿態，看得出他不想在荊南動武。」
「那我還有多少時間？」劉備沉聲問道。
「這需要和劉璟談，如果談得好，半年時間應該能爭取到，畢竟他也需要時間準備。」
劉備沒有說話，他負手慢慢走到牆邊地圖前，久久凝視著交州，在他從前的印象中，交州從來都是荒蠻之地，他壓根就沒有想過自己有一天會去那裡，但現在他得去了，可就算荒蠻之地，現在也已經被三大勢力佔據，他劉備還擠得進去嗎？
諸葛亮也走到地圖前，微微嘆息道：「我有時也很佩服劉璟的目光長遠，他明明可以消滅我們，但他卻沒有這樣做，而是把我們趕去交州，他是想利用主公的力量統一交州，經營交州，將來他便可以直接從主公手中把一個富裕而不再荒蠻的交州接過去。」
劉備冷笑一聲，「他想得很好，可他辦得到嗎？」
諸葛亮也笑了起來，「其實嶺南雖然偏居一隅，但有了當年南越王趙陀及後人打下的基礎，主公完全可以稱雄一方，建立帝業，不一定非去巴蜀，我們可以打造戰船，訓練甲士，等待時機，待中原虛弱疲憊，我們便可以乘風破浪，北征中原，也有機會再建功業。」
劉備心中的雄心壯志又漸漸燃燒起來，或許他沒有重回中原的機會，但他子孫可以繼承他的事業，一定能實現自己的理想。
想到這，劉備又滿懷信心道：「交州三大勢力中，我們可以從吳巨這裡下手，我和吳巨有舊，而且吳巨支持琦公子，只要我們從吳巨這裡打開缺口，我們就能在交州立住腳。」
不知不覺，他們已經不再談荊南，而是把話題轉到了交州，諸葛亮並不太看好劉備的樂觀，不管劉備和吳巨有再深的交情，不管吳巨怎麼支持劉琦，但他都不會損害自己的切身利益，他不可能將蒼梧郡拱手想讓。
諸葛亮沉思片刻道：「主公是朝廷任命的交州牧，不管吳巨、賴恭還是士燮，他們都不得不承認這一點，在道義上，主公首先就佔了優勢，其實便是我們還有一萬五千軍隊，要強於吳巨和賴恭，弱於士燮，我們可以分而擊之，逐個蠶食。」
劉備拱手笑道：「願聞其詳！」
諸葛亮用木杆一指地圖上的鬱林郡道：「從零陵下去，首當其衝便是賴恭的鬱林郡，賴恭此人野心勃勃，和吳巨敵對，所以我們第一個就要吞掉他，而且我知道此人有勇無謀，我略施小計便可以將他的六千軍毛髮不損的收為己有。」
劉備大有興趣，又連忙道：「軍師請說下去！」
諸葛亮又一指蒼梧郡笑道：「吳巨有軍隊五千人，那我們軍隊已超過兩萬，這個時候主公表面與他議和，安撫住他，而我們軍隊只要趕在士燮救援之前，以掩耳不及迅雷之勢兵臨城下，我想吳巨除了投降主公，他已經別無選擇了。」
劉備緩緩點頭，「軍師果然高明，那士燮又該怎麼對付？」
諸葛亮淡淡道：「士燮有兩萬軍隊，他的家族在交州根基很深，稍微麻煩一點，但我們只需一年時間便可以剿滅他，關鍵在於士燮的勢力範圍，這是他最大的弱點。」
諸葛亮用木杆指了指南海郡，又指向交趾郡，笑道：「主公沒發現嗎？士燮的軍隊和根基都在西面的交趾郡，但人口最多、農耕最發達之地卻是在東面的南海郡番禹一帶，交趾和番禹只通過狹長的高涼郡和合浦郡連接，我們只要切斷高涼及合浦，番禹便唾手可得，士燮只能退縮到交趾以南，沒有了番禹的糧食供給，士燮怎麼養活他的兩萬軍隊，只需對峙一年士燮便撐不住了。」
劉備嘆息一聲，「軍師足不出戶，便有了平南之策，足慰我心，我決定明天就派使者去荊州，和劉璟好好談一談，爭取到半年時間準備，另外，希望他能早日放回二弟。」
諸葛亮沉吟一下道：「還是讓微臣去吧！我想只要把一個人交給劉璟，就能說服他放回關將軍。」
「誰？」劉備回頭問道。
諸葛亮微微嘆口氣道：「微臣說的是劉琦。」