對林則徐在廣東禁煙的效果，道光本來就已相當不滿。說的也是，讓你查查鴉片，怎麼最後弄到大動干戈，讓人殺到皇城門口來了？當然最慘的還是，由於來不及準備，一時間似乎還打不過他。這不光是誰贏誰輸的問題，還關係到「天朝上國」的體面。
就在道光輾轉反側，考慮要不要扮演清正廉明的大老爺，給「洋竇娥」們一個公道，也給自己一個台階下的時候，不識相的林則徐偏偏發來密折，上面討論的仍然是如何跟英國人干到底的事。
道光再也忍不住了，冷淡和不睬也終於變成了無法遏制的衝冠一怒：我這連耍猴都快用上了，就怕再打起來，你在那還要說空話，瞎嗆嗆，嫌我還不夠鬧心是不是？
林則徐是個寧折不彎的人，決不會因為外來壓力而輕易改變自己的主張。接到道光怒氣沖沖的批複，他立即意識到，皇帝在和戰策略上正動搖不定，所以緊接著又發來第二道奏摺。
「英國人船堅炮利不過是用來嚇唬我們的，只要我們拿出銀子來打造船炮，制服他們綽綽有餘。如果不早點動手，只怕禍患將無窮無盡。」在這道奏摺中，林則徐再次重申，禁煙是沒有錯的，「鴉片之為害甚於洪水猛獸」，就算堯舜那樣的聖人穿越到我們大清國，也會力主嚴禁。
可是這份「主剿」的奏摺在道光那裡激起的，只是更多更大的憤怒：「我要不要動手，早點還是晚點動手，還用你來教嗎？你說英夷在嚇唬我，我看，是你學英夷來嚇唬我才對吧！」
道光提起筆，唰唰地給了個上聯「無理」，下聯「可惡」，最後是橫批「一片胡言」。至此，林則徐在道光心目中的位置一落千丈，曾經「才略冠時」的光環也黯然失色。
1840年9月28日，道光下旨將林則徐予以革職，罪狀為「受人欺矇，措置失當」。雖然是朝廷內部的處罰，其實也是做給洋人看的，告訴他們，皇上替你們「雪冤」了。
換下林則徐，道光要起用一個更好的能吏，此人就是琦善。
見皇帝如此看重自己，爵爺也來了精神，胸脯一拍，看我的，憑咱這張嘴，就夠洋人們喝一壺的了。他首先派人給懿律送去好吃好喝的，什麼牛啊羊啊，雞啊鴨啊，為的就是套近乎。近乎套夠了，才跟對方商量：「眼看北方天涼了，要不我們到廣州去談吧？」
英國人沒覺得這個提議有什麼不合理，當即就同意了，於是海軍艦隊原路撤回廣州。
能夠靠嘴上功夫就把巨無霸式的強敵給哄回去，道光認為琦善太有才了，已經堪比諸葛亮那樣的神人：「你的片言片紙簡直可勝十萬之師！」
11月29日，琦善作為新任欽差大臣到達廣州，取代了林則徐。
曾幾何時，琦善是和林則徐站一排的，都是堅決的禁煙派。在道光宣布第三次禁煙後，他所查獲的鴉片數量居於全國第二，成績超過了林則徐。不過這裡必須說明一點的是，琦善禁煙禁得狠，並不表示他跟鴉片有多過不去，這純粹屬於官場技能，就是特能猜皇帝的心思，而且猜得既准又快。
在各方大吏都還大多摸不清風向的時候，琦善便知道道光要對鴉片動真格的，所以大事小情無不使著勁上。等到道光把態度擺明，封疆大吏們可以說沒有一個不是禁煙派，遞上來的奏摺清一色要痛打落水狗，可這時候已經晚了，因為人爵爺早就憑著禁煙的政績排第二了。
現在重新站隊，林則徐因「主剿」，下課，琦善改了「主撫」，上崗，不能不說，隨風而變有時也是官場生存的一大法則。
12月4日，琦善正式接任兩廣總督一職，中英談判也在同一天啟動，由於懿律已患病回國，英方談判代表換成了義律。
總督大人跟帝國所有督撫一樣，不通洋文，英國人遞上來的文件怎麼看都像是一堆道士畫的符咒。不過等到有人把它們翻譯出來時，琦善蒙了：那真是能要人命的符咒啊！
出京時，道光和琦善所定的談判底線是「雪冤」和「乞恩」，具體一點說，就是懲辦林則徐和恢複通商。孰料義律對懲不懲辦林則徐毫無興趣，他要做的是生意：除了通商，還有割地賠款。
這可把琦善給難壞了，他做不了主，只能含含糊糊地向上彙報。談判隨後中止，義律見狀馬上拿出撒手鐧，下令英軍向廣州發動進攻。