徐增寿话说的很严重，听起来也很有道理，顿时吓得徐膺绪十分惊慌。他对徐晖祖说道：“大哥，我听四弟说的话很有道理，咱们徐家现在确实太树大招风了。大哥你是不是琢磨退步之事？”
但徐晖祖脸上的表情却一如既往的平静，甚至还笑了出来。他这幅表情让徐增寿有些生气，但也不敢发火，只能压着火气说道：“大哥，莫非你觉得我说的不对？”
“你说的当然对，月满则亏，但只知其一不知其二。”徐晖祖正色道。
“那其二是什么？”徐增寿追问道。
“第一，咱们家虽然在军中的势力最大，但常家与李家都比咱们家差不了多少，因常升和常森都不会打仗，李景隆陛下也甚少派他带兵出战，所以咱们家在军中的影响日渐增大。可陛下也在扶持蓝珍、曹行等人，耿炳文与曹震两员老将尚在世，陛下尚不至于担心咱们家在军中势力过大。”
“第二，前年的伊吾之战，你这样熟知内情之人当然知晓陛下并未亲自指挥将士征战，但陛下亲临伊吾，甚至在许多人看来一直在中军，此战必定是陛下亲自指挥。所以伊吾之战后陛下在军中的声望大涨，将领中反而是带兵率先冲入敌阵的曹行声望最高，但也远不及陛下。所以陛下也不会因为伊吾之战后忌讳兄长。”
“我这不是在抱怨，”徐晖祖又赶忙补充：“陛下九五之尊，如此大战能亲临前线，就算是先帝在即位后也不曾做过，我对陛下极为敬佩，陛下在军中声望大涨也是应有之事。”
“第三，现下耿炳文时常因病请假在家休息，但除了我这个都督同知，还有四个都督佥事为我们的副官，处置大都督府诸事。我也并没有大都督的权力，陛下也不会因此忌讳。”
“至于其四，你说的制定武将评定章程之事，确实会引起其它人嫉妒，但越是如此，我徐家越不会有事。陛下是喜欢将领们一团和气，还是互相看不对眼？其他人家嫉妒咱们家，看咱们家不对眼，难道不是好事？”
“我之所以不告诉你制定武将评定章程之事也与此有关。咱们家三兄弟数你最好玩，也喜欢交际，与其它勋贵关系大多不错。若是我将此事告诉了你，你对他们透露，在陛下看来就是咱们家拿着朝廷的事情做人情交好其它勋贵了。咱们家已是勋贵第一，还要交好其它勋贵，居心何在？”
“所以此事必须不偏不倚，谁也不能告诉。自然，咱们家也不能与其它勋贵关系闹的太僵，这就要仔细拿捏了。”
“还有一件事是我琢磨了许久的。当今陛下似乎有意效仿宋太祖，但却又有所不同，到底如何我也拿捏不准，但应当不必担心陛下屠戮大臣。所以咱们家至不济也性命和财富无忧，不必担心如同李善长一般。”
提起李善长，徐晖祖心有余悸的叹了口气。当初李家怎么可能图谋造反？甚至胡惟庸想要造反他都不信。但皇帝就用这个理由杀了他，而且摆明了就是因为忌讳李善长才出手。当时徐达已经去世，他接任家主，听到李善长全家下狱的消息后当时就吓得魂不附体，战战兢兢过了好几年才缓过来。
不过徐膺绪和徐增寿却不像他联想了这么多。他们听了徐晖祖的话，徐膺绪和徐增寿的脸色逐渐舒缓下来，徐膺绪吐了一口气笑道：“果然大哥已经将事情都想到了。”
徐增寿也附和一句，但想了想又道：“大哥，制定武将评定章程之事，大哥所言确实有道理，咱们家与其它人家关系略差些不是坏事。可若是他们对咱们家太多看不对眼，陛下会不会将咱们家抛出来平息众怒？或许不会不严厉处置，但小小的惩戒不会少。”
“你说的不错。确实可能发生这样的事情。为兄也有准备。”徐晖祖顿了顿，说道：“等武将评定章程制定过，在军中推广后，我就辞去大都督府都督同知之职。”
“什么！”徐膺绪和徐增寿二人同时叫了起来。他们万万料不到，徐晖祖竟然打算辞去都督同知。要知道，徐晖祖今年才四十岁，正是一个官员的好时候，但却忽然要辞职，他后半辈子是要一直在家中渡过么？指挥过伊吾之战，参加过安南之战、平定路谢之乱的将领在大好年纪竟然就要辞官在家休养！他们二人想想，就觉得不能接受。
“大哥，何必如此？”徐增寿回过神来说道：“你是咱们家的主心骨，也是军中亲近咱们的将领的主心骨，若是你辞去都督同知，恐怕会使得人心不安啊。”
“是啊大哥，顶多这个差事做完了，以后韬光养晦什么差事都不做了。”徐膺绪也说道。
“二弟，你说的可不对。韬光养晦用在这里可不妥当。”徐晖祖先小小的开了个玩笑，之后正色说道：“而且，什么差事都不做是不成的。陛下设立的大都督府与之前的五军都督府可不一样，所设之官职要办何差事也都是清清楚楚、明明白白，丝毫没有推诿的余地，二弟你也在大都督府为官，想必也有体会。何况耿炳文长期以病在家休息，我不办差，就没人办差了。”
“至于四弟，你所说的，正是我要辞去都督同知的缘故。”
“虽然军中尚有诸多势力能制衡咱们家，但咱们家毕竟在军中势力最大，我不客气的说，虽然在普通将士中陛下声望极高，曹行等人声望也不低；但在老一代将领逐渐故去后，在新一代将领中，我的名声一直最高。”
“而且伊吾之战，就是当年先帝开国之时也没打过这样大的仗，我身为统帅，众将领又知陛下并未亲自指挥，我在将领中的声望自然也水涨船高。”
徐晖祖十分坦然的说出了这个事情，好像说的不是自己，继续说道：“此事陛下必定也知晓。虽不必担心功高震主，但也会被记挂在心上。”
“所以我主动辞去都督同知之职，在家专心教导儿孙、处理家事，就是让陛下不再记挂着这件事。”
“而且这对朝廷也有好处。陛下本来设立了两个都督同知，既是互相制约，又是让办差能快些。可耿炳文长期卧病在家，只有我一人，做事难免有顾及不到之处。我辞去官职的奏折一进，耿炳文必定也会上折辞去都督同知之职，陛下顺水推舟答应，另行任命二人为都督同知，大都督府的差事办起来也会快些。”