歲三從副長助勤平閑重助那裡聽了很多關於芹澤在常州潮來館的逸聞，平閑在芹澤還在水戶的時候，就跟著他了。
說是逸聞，聽上去更像恐怖故事。比如在常州有段時間他覺得隊伍的很亂，就拉出來三個年輕隊員，讓他們並排站在土壇場（刑場）上。只見芹澤嘴裡發著怪聲從他們面前疾風般快步走過，只見三個血淋淋的人頭滾落在地。
隊伍里的頭頭腦腦認為他這是在實施私刑，將他關進了地牢。
「我的赤膽忠心，應該有人知道。」芹澤在地牢里絕食數日，其間咬破小指，寫下了「梅花長現雪霜色，零落泥土猶存香。」的和歌貼在牢門口。展示了自己逸秀的文采。
芹澤出生在常州芹澤村，是一個鄉士的兒子，本名好像叫木村繼次。現在「芹澤」這個姓是他脫藩後自己取的，但是為什麼要把名取成「鴨」就實在不知何所取義了。不過取單名在當時的志士中是一種潮流。
新選組結成之後，芹澤鴨變得更加狂暴。有次他興緻一起，拉著一個隊員到島原《角屋》喝「花酒」，喝著喝著芹澤不知道為了什麼，臉色一沉、大聲叫道：「叫老闆出來。」他一喝醉酒，那幅「吃相」太可怕了。
正好土方也在店裡喝酒，看到這個情況，馬上悄悄跟身邊的隊員吩咐，下樓找到老闆角屋德右衛門趕快逃走。並叫人回報芹澤：「德右衛門跑了。」
「跑了，跑到哪裡去了？」
「不知道」
芹澤冷笑一聲：「土方你還是這麼機靈。」
土方嚇了一跳，但還是面不改色的說道：「什麼事？」
「我在誇獎你，你肯定知道德右衛門到哪裡去了，你跟我來。」
「告訴您，我實在不知道他去哪裡了。」
「你別客氣了。」
芹澤的口氣異常冷峻，芹澤令人感到恐怖的就是，他即使喝的再多，腦子總是異常清醒。歲三對這種清醒感到不寒而慄，不由自主地表現出了一絲恐怖。芹澤那雙光棍眼全都看在眼裡，略帶嘲諷地說：「土方，你和我一塊去報仇，新選組組長芹澤鴨、副長土方要到角屋德右衛門的房子里去報仇。」
兩個人走進德右衛門的房間里一查，非常不巧，座榻還是熱的。
芹澤冷眼瞟了瞟土方，高聲喊道：「我被人出賣了，仇家居然逃跑了！跑的了和尚，跑不了廟。」
只見他一下子拔出了刀，一下子砍倒了一旁的燈架，動作又快又狠，讓人目不暇接。接下來半刻（半小時），芹澤揮舞手中的鐵扇，把房間里的家什，擺設全部砸了個稀巴爛。
歲三回到座位上時，芹澤還在那裡稀里嘩啦的砸東西，土方一聲不吭低頭喝酒，忍受著砸東西的噪音，根本沒有半點制止的意思，他突然拿起了手中的酒杯。
土方心想：「你繼續瘋下去，只是自取滅亡。近藤現在就在等這一天。」想到這裡，土方突然被嘴裡的酒給嗆住地咳嗽了起來，顯得相當失態。
京中的市民看到新選組如同看見猛虎，很具諷刺性的，新選組的隊員看見芹澤，如同看見了豺狼一般，躲之不及。
近藤對身邊發生的事情，一向是不聞不問，從來不對芹澤發一句評論。他要提起芹澤只是為了打聽芹澤的去向，近藤對芹澤的行動一向兩眼一抹黑。雖然說隊伍里的大小事情都要芹澤、近藤、新見三個人同意之後才能決定，但是芹澤無論做什麼事情從來不跟近藤商量，一直和新見搞「黑箱作業」。
隊伍成立五個月之後，八月三十日這天，芹澤的惡作劇終於到達了頂點。這天近藤走出房間，只看見院中間芹澤正在指揮大家把門大炮從倉庫里拖出來。
近藤還是如同往常一般一聲不吭，他知道這時開口，兩個人肯定是「話不投機」，一轉身又回了自己的房間。
一回房間，他就派人找來了土方歲三，低聲吩咐：「你看見了（芹澤正在做的事）？」
「看見了。」
土方一臉的愁容，「怎麼辦？那門大炮是為了抵抗外夷，特地向會津中將衙門借的。但是對方的條件是，要調動大炮要經過你們三位局長的一致同意，經過會津中將的同意才能動用。」
「你這算是批評我嗎？」
近藤略顯不快的回答道，但還是讓沖田總司去調查。沖田報告說芹澤拉著這門炮，要向萌屋町一條的富商大和屋庄兵衛敲詐勒索。
土方聽說這件事，嚇了一跳：「大和屋，是不是因為那個舍札（告示牌）？」
「對就是那個和舍札相關的大和屋。」沖田一如往常，嬉皮笑臉地回答道。
大和屋指的是不久之前，發生在京都一起和攘夷志士相關的暗殺事件。
後來才知道，這是準備在大和地方舉兵的天誅組藤本鐵石、吉村寅太郎干下的勾當。他們為了籌划起事的經費，假借誅伐奸商的名義，悄悄闖進了佛光寺高倉油商八幡屋卯兵衛的家，大肆掠奪一番，還把主人卯兵衛拖到千本西野砍頭，把腦袋擺到了三條大橋旁邊還立了一塊舍札。
近藤現在正焦頭爛額的尋找兇手。
現在的問題是，那個舍札上寫的清清楚楚地寫著「不久之後，我們就要將大和屋庄兵衛和其他兩、三名富商梟首示眾。」這裡面寫的清清楚楚下個目標就是大和屋。大和屋自然是心驚膽戰，馬上托關係找守護公用人求新選組保護。可是他卻耍了點小聰明，通過朝臣醍醐家，向藤本鐵石提供了一大筆「賣命錢」。這事情不知道怎麼的，被芹澤知道了。
「原來如此」土方還是頭一次聽說這件事，沖田略帶稚氣的說道：「我認為是大和屋做的不對，芹澤先生自然是要發火的。這邊找我們給他保護，那邊卻悄悄地給那些奸人賽錢，不說別人，至少我是非常討厭這種做法。」
「小子——」
歲三很喜歡沖田的稚氣。
「我知道你的脾氣，也知道大和屋做的不對。我想要知道的是芹澤拉著那門大炮去幹什麼？你給我去查查看。」
「是。」
沖田點了點頭。
「這個不查都知道，芹澤先生想詐點錢，拖著大炮到他的門口，催要現款。」
「沖田君，你是不是吃錯藥了？」
「是不是幼稚的無可救藥了？芹澤先生這樣做確實不對，他這樣做和那些不法之徒借著籌措軍費目的搶劫，有什麼區別？但是這樣做不是很豪爽嗎？我喜歡芹澤先生這種豪俠之風，大天白日拖著大炮敲詐——」
「你別說了，回去吧。」土方揮揮手讓沖田出去。
等沖田一走，土方一揮手「近藤兄，現在」做了個砍頭的動作。土方認為現在已經有了處理芹澤一幫人最好的理由了。第一，芹澤沒有經過許可就擅自使用大炮。第二，隊伍里有規定「不許擅自籌措資金」，並且明確規定誰犯了這條法規，不是切腹就是砍頭，這個刑罰適用於任何人，哪怕是局長。
近藤一抬眼：「但是，有沒有能砍倒芹澤的人哪？」
「沖田可以，我也可以和他拼一拼。對付新見，原田那套寶藏院槍法就可以搞定了，平山、平間只要藤堂和永倉就能夠對付了。」
近藤回答說：「還得繼續等，土方老弟。」
第二天，芹澤命令手下，將大炮從壬生駐屯地拖到了萌屋町一條。炮口對著大和屋的大門，大炮旁邊升起了一大堆篝火，這一來不但是大和屋的僱員，連周圍的鄰居都被震動了。一幫人把十幾個鐵球扔進火堆中，準備造炮彈。芹澤看看鬧得差不多了，用鐵扇悄著脖子，走進大和屋。一屁股坐在門框上「老闆在不在啊？」
「我是個喜歡直來直去的人，你們老闆已經麻煩我們新選組保護你們了，可是還要塞黑錢給他媽的那幫強盜，做事情太不上路啦！庄兵衛怎麼啦？變成狐狸還是狗啦！」
從番頭（經理）到手代（普通店員），齊刷刷地跪了下來，誰都嚇得不敢說話。
「要是他媽的還有點人性，你們就馬上拿出一萬兩，馬上！」
「您容我說，說一句。」
「有屁快放！」
「我們老闆，現在出去旅遊了。」
芹澤立刻沉下了臉，這個男人非常厭惡別人對他說謊，說疾惡如仇，那還不如說是病態。
「噢，旅行去啦？」
芹澤沒有再問下去，起身就往外走。店裡的人都提心弔膽地想接下去會發生什麼事情。只見他大步走進路對面的油漆匠藤兵衛家裡，他從二樓天窗爬上了樓頂，一屁股坐了下來。芹澤把這當成了「指揮部」，只見他打開鐵扇，向下大喝一聲「好了嗎？」
芹澤是個喜歡耍威風的人，他手搭涼棚看了看周圍的地形，等下面準備好了，他模仿古代的炮術號令，大聲喊道：「準備，發——射。」
只見炮口轟的一聲，炮彈射入了商店倉庫厚厚的牆壁，但是並沒有燃起火災。
「再來一次！」
打了兩、三發炮彈，芹澤瞄準的目標——倉庫，