陸炳和呂芳的關系，因為嘉靖皇帝朱厚熜這層聯系，變得很微妙。兩個人在外面人看來，是嘉靖皇帝朱厚熜的左膀右臂而已，但是他們自己知道兩人不是親兄弟，卻比親兄弟還要親。按照陸炳的原話的意思，要是呂芳是個女人的話，陸炳絕對會娶來當老婆。要是呂芳有生育能力的話，他們兩人將來的兒女一定是成雙成對的。為此呂芳早在陸炳的老婆懷孕的時候，就約定好了名分，無論陸炳將來有多少個孩子，無論是男是女，呂芳都是他們的幹爹。也因為這個原因，厚臉無恥的陸炳經常以“你幹兒子餓了要錢買吃的”、“你幹女兒長大了要做新衣服”等等為理由，隔三岔五去呂芳那裡搬東西。大到比人高的花瓶，小到針頭線腦，陸炳只要看上了眼，就往自己家裡搬。可適當呂芳向陸炳要錢或者借錢的時候，陸炳就擺出一副“要錢沒有，要命有一條。”的樣子。氣的呂芳在人前人後大罵陸炳“吝嗇鬼”、“死要錢”、“沒義氣”。
可是隨著嘉靖皇帝朱厚熜站穩了腳跟，逐漸控制了大局之後。呂芳發現陸炳發生了一些變化，並不是說陸炳向背叛嘉靖皇帝朱厚熜。但是呂芳覺得陸炳多了一些私心，多了一種隔閡。後來才知道陸炳受了一些手下人的影響，開始為自己打算起來。錦衣衛是一個和皇室數代關系的組織，他們之所以能存在下去，不光是因為對歷代皇帝絕對的忠心，更是因為他們和當權的太監之間若即若離的關系。也就是說錦衣衛是皇帝暗中牽制太監勢力的工具，更是平衡臣工和皇室之間關系的組織。表面上看上去錦衣衛被鋒芒畢露的東廠所壓制著，其實每當皇帝有事的時候，最為強而有力的支持者不是大臣，也不是皇室其他成員，更不是什麼太監，而是數代為皇帝默默付出的錦衣衛世家成員。這些人平時做人做事很低調，但是一有事的時候，他們的權力和手段層出不窮。陸炳全面控制錦衣衛的時候，漸漸瞭解了這件機密，同時也接觸了一些這種人。這些人或是明說，或是暗示，要陸炳和太監，特別是呂芳這種有實權的太監保持關系的同時，也要保持一定的距離。陸炳也是為了自己的地位，還有將來子孫的富貴，才開始有意無意地和呂芳保持一定的距離，甚至於在一些事情上提出不同的意見。
呂芳和陸炳的第一次正面沖突，發生在嘉靖皇帝朱厚熜當政的十二年。嘉靖皇帝朱厚熜認為大局已經收到了控制，為了便於管理，決定收回錦衣衛的權力，還歸司禮監管理。但是司禮監掌印太監已經換上了呂芳，呂芳已經控制了司禮監，無論誰出任兼管錦衣衛的司禮監秉筆太監，都不會受到影響。嘉靖皇帝朱厚熜想把陸炳安排到更重要的位置，幫陸炳實現出將入相的夢想。呂芳事先知道了一點點，以為陸炳也會同意嘉靖皇帝朱厚熜的決定。沒想到陸炳不但沒有答應嘉靖皇帝朱厚熜的決定，而且希望嘉靖皇帝朱厚熜徹底將錦衣衛從司禮監分離出去，單獨成立一個只屬於皇帝一個人直接領導的部門。嘉靖皇帝朱厚熜一時想不過來，呂芳卻知道了陸炳的意思，陸炳想讓錦衣衛和司禮監分庭抗禮，這樣一來不要說東廠了，就是司禮監寄過來也或許會受到錦衣衛的牽制。這是絕對不可能的事情，作為司禮監掌印太監，呂芳也絕對不會不允許這種事情存在和發生。嘉靖皇帝朱厚熜沒有表態之前，陸炳和呂芳已經為了這件事情在嘉靖皇帝朱厚熜面前吵了起來。三個人第一次同時覺得三個人一條心的時代過去了，嘉靖皇帝朱厚熜對呂芳和陸炳很失望。呂芳也看出了陸炳的野心，還有陸炳想完全控制錦衣衛的用心。為此所有的安排無限期被擱置，錦衣衛依然在陸炳手裡，司禮監一樣有權力監管錦衣衛。因為陸炳沒有交出錦衣衛的實權，所以所謂的兼管錦衣衛的司禮監秉筆太監只是一個有名無實的虛名。也因為這樣，陸炳想出將入相的夢想，一直沒有實現。
陸炳在錦衣衛一呆就是三十多年，勢力盤根錯節，可以說是完全控制了錦衣衛。不但陸炳長期出任錦衣衛最高指揮官，就連陸炳的兄弟還有兒子們也都在錦衣衛。呂芳多次提醒陸炳，不能這麼明目張膽的做，可是陸炳一點也聽不進去。後來導致除了陸家之外，就連宮裡的太監也指揮不動錦衣衛。當嘉靖皇帝朱厚熜有一次無意之中說出了“錦衣衛是陸家的。他們只認識陸炳。”的時候，呂芳知道陸炳壞事了。多疑又愛大權獨攬的嘉靖皇帝朱厚熜，不會無的放矢，看來嘉靖皇帝朱厚熜已經對陸炳起了戒心。正當呂芳準備找個機會親自秘密會見陸炳，當面把這件事情告訴陸炳的時候，什麼都已經晚了。嘉靖皇帝朱厚熜以陸炳勞苦功高為理由，賞下一顆新研製的金丹。嘉靖皇帝朱厚熜賞賜親信金丹有兩個目的，第一表示對親信手下的寵愛，第二就是用這些親信手下試藥。陸炳已經多次得到這種殊榮，所以並不在意。當剛剛得知這個訊息的呂芳失態地趕到陸家，企圖阻止陸炳的時候，陸炳已經服下了這顆金丹。呂芳也顧不得外人在場，也不再顧忌會不會事後被嘉靖皇帝朱厚熜責罵，馬上拿起一邊的一大壺清水往陸炳嘴裡灌。並下令自己的親信馬上去陸家廚房，熬一鍋的綠豆湯。可是因為大家手忙腳亂，也因為陸家人並不相信呂芳，以為呂芳的人會在綠豆湯下毒，所以拖拖拉拉的。當綠豆湯送來的時候，陸炳已經不行了。陸炳已經不能說話了，他死死地抓住呂芳的手，他有太多的怨恨和不滿說不出來。陸炳死了，陸家出奇的安靜，就連表面上的工作也不做。這當然是呂芳的主意，為此嘉靖皇帝朱厚熜不但沒有處置陸家，而且連呂芳也沒有處罰。
呂芳做了這麼多年的大內總管，知道的機密太多了。當然更對嘉靖皇帝朱厚熜和皇室起了一種莫名其妙的不祥感覺。這不是空xue來風的，而是一種直覺，一種呂芳多年來屢試不爽的直覺。大明皇帝可以說是歷朝歷代最窮的皇帝，也可是說是最富有的皇帝。早在朱元璋打下江山的時候，他並沒有伺機斂財，更沒有侵吞敵人們的財産。無論是陳友諒的、還是張士誠的，或者是大元皇室的財産，朱元璋都要手下人一一記清楚每一筆財物。這些錢有的進了國庫，有的分給了有功之臣，更多的發給了因為戰亂而失去親人和土地的老百姓。所以開國之初朱元璋的皇宮幾乎沒有什麼錢，就連要建皇宮的錢也沒有。為此大臣們主動提出這個皇宮由國庫出錢建造，具體的錢找當地的富商要，就這樣半敲詐半脅迫的逼著有錢的商人拿出錢，這才有了皇宮。為了省錢，也為了充實大家的日常生活，馬皇後帶頭在皇宮內織布，所有的産品除了供應大家日常所需之外，全部按照市場價格賣給國家有關衙門。朱元璋又下達了一系列減稅和免稅的指令，所以在大明開國之初，皇家的私産少得不如一般的大戶人家。據說有一次為了吃肉，幾個不大的皇子甚至於打起來。馬皇後一邊親自責打孩子們，一邊暗自流淚。堂堂皇子不但吃不起肉，而且會為了一兩塊的肉打起來，說出去誰會相信？可是這種事情真的在大明皇宮發生了，原因就是因為皇家沒有錢。
說起有錢，大明皇帝真的很有錢。洪武年間赫赫有名的“財神”沈萬三，他的家産多的可以說是“富可敵國”。可是誰會想到抄家的時候，沈萬三的家産不過三十多萬兩銀子，這和名聲在外的沈家實際財産大大不符。其實沈萬三的家産一部分已經被沈萬三提前轉移，更多是被朱元璋用各種理由“借”走了。無論是建皇宮，還是修建長城，或者是北上用兵，沈萬三的錢幾乎已經被朱元璋拿光了。當然最後朱元璋依然沒有放過沈萬三，逼著沈萬三交出眾多民間店鋪，換來沈萬三一個兒子的性命。朱元璋保證沈萬三這個兒子不但可以活下來，而且會照顧的很好。就這樣原屬於沈萬三的店鋪，一眨眼成為了大明皇室的私有財産。有了這筆錢之後，窮慣了也窮怕了的朱元璋腰桿子就硬了起來。
沈萬三的錢到底有多少，現在已經沒有知道了。但是呂芳知道一個大概，當年建文帝朱允炆出逃的時候，據說帶走了一批價值不菲又容易攜帶的財寶。據說這筆錢的數量大概是當時朝廷十年的總收入，也就是說有了這筆錢朱允炆只要想複國，機會就很大。但是這筆錢只是皇宮財産中的一小部分，大多數的錢和財物因為時間緊，又不容易搬運，只好留在了皇宮裡。明成祖朱棣登基之後，這筆錢發揮了重大作用，不但拿來犒勞將士，更是用來穩定人心。為了尋找建文帝，這才有了鄭和七下西洋的事情。鄭和下西洋的最初的目的不是賺錢，也沒有想到會這麼好賺錢。當時的目的第一是尋找據說出海了的建文帝朱允炆，第二就是向各國宣揚大明的國威。沒想到建文帝朱允炆沒有找到，世界各國不但知道了大明，而且給大明帶來了巨大的商機。呂芳在翻閱皇家秘檔的時候發現，所有下西洋的本錢和費用，都來自於一個地方，這就是舊皇宮。也就是說朱元璋查抄沈萬三的錢，這才有了下西洋的本錢。
因為七下西洋，所以給大明皇室，特別是皇帝自己帶來了巨大的財富。據說七下西洋的利潤，足可以負擔起大明皇室所有成員日常開銷近三百年。當時皇帝的私人財産幾乎和戶部的國庫差不多一樣多。這可能是朱元璋萬萬沒有想到的，沒想到他給後代子孫留下了這麼大的財富。所以說大明皇帝是歷朝歷代最富有的皇帝，這一點並沒有錯。
