有意思的是，王守仁是滿山遍野去找老道，而在唐伯虎這裡，卻是老道自己找上門來。史載，有個衣衫破爛的老道，來找唐伯虎投資，要求兩人合夥經營煉丹，煉出金子來大家一起發財，唐伯虎聽了，順手搶過老道手中的一柄摺扇，在上面題寫道：
破布衫中破布裙，逢人便說會燒銀。
如何不自燒些用，擔水河頭賣與人。
唐伯虎這首詩的意思是說：你既然有燒煉金丹的本事，何必還要找合伙人？像你這種騙子，最多也就忽悠忽悠王守仁，想騙我唐伯虎，還差著點兒。
總而言之，唐伯虎真的有點兒像現代影視劇中的那個幽默形象，比方他給一本專寫神仙故事的《列仙傳》題詩，詩曰：
但聞白日升天去，不見青天走下來。
忽然一日天破了，大家都叫阿。
這首詩最後三個字「阿」，是江南兒語。江南一帶的小朋友遇到害羞丟臉的事情，就齊齊拍掌叫：阿，阿……詩居然可以這樣寫，估計你就算是打死王守仁，他也不敢這樣搞。
事實上，這首詩實際上是寫給王守仁的——未必是寫給王守仁本人，畢竟唐伯虎和他無冤無仇，但卻是寫給王守仁正在乾的事情的。
這首詩的意思是說：那些腦子灌水、神經短路缺心眼兒的人兒啊，你一天到晚地往深山老林里鑽，求仙訪道，夢想著飛天成道，成為聖賢，你少來忽悠了。都聽到你瞎掰這個成仙了，那個得道了，真要有這回事兒，你怎麼不把這些成仙得道的人，拉過來讓大家瞧瞧呢？王守仁，你儘管放開牛皮吹吧，吹吧吹吧，等到哪一天，「嘣」的一聲巨響，牛皮吹爆了，我看你到時候咋整。
可以確信，這也是當時京城諸官對王守仁的工作評價。
放著正兒八經的工作不好好兒干，一天到晚鑽原始森林，一會兒忽悠說你遇到個不存在的蔡蓬頭，一會兒瞎掰說你遇到個身上長滿了鞭毛孢子的原始人，誰信你呀？
總而言之，王守仁發現他有點兒混不下去了。
辭職，病退。
他的辭職報告在第一時間被批准。明擺著，大家都有點兒受不了他了。
鬱悶的王守仁回到老家餘姚，學著他三世祖王與準的花樣，鑽進了四明山的老鼠洞里。娶六個老婆扔在家裡，他自己卻去鑽老鼠洞，這麼個搞法，有派頭兒。
然後他又編了個瞎話。
《年譜》中這樣記載他在四明山上的快樂生活：
久之，遂先知。一日坐洞中，友人王思輿等四人來訪，方出五雲門，先生即行仆迎之，且歷語其來跡。仆遇諸途，與語良合。眾驚異，以為得道。
這段記載說，王守仁在四明山的陽明洞里，並不是避居人世，而是帶著僕人。有一天幾個朋友來看望他，還在路上，他就吩咐僕人去迎接，並詳細說出了幾個朋友的情形，朋友們大驚，認為他已經能夠未卜先知，真的得道了。
這個故事，表明了王守仁仍然是執迷不悟，行走在求仙訪道的錯誤之路上。據他自述，這時候的他：日夕勤修，練習伏藏，洞悉機要，對道教的見性抱一之旨，不但能通其義，蓋已得其髓。能於靜中內照形軀如水晶宮，忘己忘物，忘天忘地，與空虛為體，光耀神奇，恍惚變幻，似欲言而忘其所言，乃真景象也——這段記載，見於《王龍溪筆記》。
但如果王守仁真的達到這種莫名其妙之境界，他又有什麼理由回到朝廷，做一名小官，任由大太監劉瑾橫蹂豎躪呢？又怎麼會娶六個老婆，把自己的家搞到了一團糟？
而且這種未卜先知的謊話，太容易被戳穿了，所以《年譜》上為此事先圓了一個場，以免真相被戳穿，使大家難堪：
久之悟曰：此簸弄精神，非道也。又屏去。
這段話的意思是，王守仁說：雖然咱家已經與空虛為體，前知五百年後知八百年，但咱不干預知未來這種沒意義的事兒，太累，太無聊。所以你想讓我算一卦證明一下，抱歉，懶得理你。
嘿，這王守仁，他還真不笨。