马文升走了后焦芳就升了吏部尚书，焦芳此人，谢迁也曾和谢棠谈论过。
祖父说此人为人粗陋无学，性格阴狠，好背后臧否议论他人，却有实干才能。要不然弘治帝也不能把这个人留在朝廷。除此之外，焦芳也是皇帝对南方派系的文官的牵制。
焦芳做编修的时候，万安曾道：“不学如芳，亦学士乎？”
焦芳知道后勃然大怒道：“这一定是彭华在背后算计我，我如果当不上学士，就在长安道上把彭华给刺杀了。”
彭华听后非常害怕，连忙将此信传给大学士万安。万安最终不得不进焦芳为讲学士。因此万安和彭华两人都厌恶焦芳。
因而在尹晏被罢免时，两人借此排挤焦芳谪迁到贵阳这等贫瘠之地。因而焦芳对这二人怀恨在心。
焦芳的确如同祖父所说，有实干的本事，也有官运亨通的运气。
在被贬贵阳不久，凭着自己的能力和钻营的本事，很快就又被任命为霍州知府。然后在几年内一步步升迁，最后升为礼部右侍郎。
但此人亦然是的的确确的寡廉鲜耻，小肚鸡肠。成化帝时，皇帝位当时还是太子的弘治皇帝诏纂《文华大训》，然后在宫中讲授。因为其书是彭华等人所著，焦芳心中嫉恨，每进讲，专挑书中的毛病。
他的私人生活更是荒诞不经。广西田州土司岑浚被治罪处死后，其妾成为叛逆家属当没官。焦芳得知此妾美艳，便把她弄到至极手里寻欢作乐。
此妾与焦芳之子焦黄中暗地私通。后被焦芳发现，父子两人为了一个女人同室操戈，成了满京城的笑柄。
至于所谓的焦芳与南方，尤其是与浙江、江西两省的仇恨。是因为成化朝的时候，焦芳被万安、彭华排挤出京后用尽手段回了京城。
当时他为了向弘治帝显示自己的才华，时常上书奏事，以求重用。然而当时的吏部尚书马文升等人不喜焦芳的为人，时常压制焦芳。
这些压制焦芳的人大多为浙江、江西两地出身。因此焦芳对南方派系敌对仇恨。是谢家的几个政敌之一。
当日谢棠年少被任命为左侍郎之时，焦芳就是直言反对的一个。
“那座宅子是谁的？”谢棠问道。
“属下不知。”钱平安道，“但是他们那座宅子的采买面白无须，像是……”宫里的太监。
钱平安说到这里的时候欲言又止，谢棠握着核桃，他手上的核桃是官帽核桃，已经被盘得圆润光滑。
谢棠笑道：“怕什么，继续说。”
“那好像是宫里太监的私宅。”钱平安道。“我听着他们采买说府上老爷姓谈。”
谢棠笑了，姓谈，果然是刘瑾！
宫中内宦在外边儿的私宅，主家又是姓谈。这分明只有本姓氏谈的刘瑾能够对得上。
如此，便从敌暗我明变成了敌明我暗。揪出了内奸。
他谢伯安不怕有内奸，就怕有内奸他不知道。
如今他知道了，以后就可以将计就计，通过这位内奸好好算计回去。
除此之外，居然还有这么样的一个大收获。任谁也想象不到，焦芳居然是刘瑾的党羽。
此时他之前的疑惑全都解开了，为什么刘瑾不去找吏部的麻烦，反而盯上了户部。
原来是因为吏部尚书已经和他勾结在一起了。
而这位曾口口声声自己是三朝老臣，忠直无私的焦大人，居然成了刘瑾的党羽，着实是荒唐可笑。