毕竟，杜伏威还是自己的主公，握有生杀大权。倘若辅公祏过早地表现出司马昭之心，杜伏威一朝翻脸，说不定，自己便会顷刻人头落地。因此，当前对辅公祏来说，还是隐忍为上。

辅公祏思来想去，决定暂时韬光养晦。杜伏威怀疑自己拥兵自重，自己干脆表现出一副不问世事的样子，让杜伏威误以为自己已经心灰意冷，放松警惕。于是，辅公祏表面上不理政事，终日与故人左游仙待在一起，钻研修道、辟谷之术，醉心于道教。实际上，辅公祏则在暗地蛰伏，苦苦等待时机。

其实，除了对杜伏威不满以外，辅公祏也是具有野心的。乱世之中，但凡是有能力的枭雄，都信奉一个法则，强者为王。辅公祏也不例外。在辅公祏看来，这么多年，若是没有自己鞍前马后地出生入死，杜伏威凭什么能有如今的风光。因此，江淮之主的位置，他杜伏威能坐，我辅公祏为什么不能坐。或许，从很早的时候，辅公祏就产生了取杜伏威而代之的想法。

只不过，杜伏威极力猜忌、压制辅公祏，辅公祏只能一时保持静默。为了达到最终的目的，辅公祏不能冲动，必须要隐忍，等待时机，一个合适的，一飞冲天的机会。终于，这个机会，还是等到了。

武德五年（622年）七月初八，杜伏威入朝。这对辅公祏来说，简直就是一个千载难逢的好机会。杜伏威一走，江淮军事集团内部，出现了权力真空的现象。当时，杜伏威这个一号人物，已经入朝。若论资历、威望与地位，江淮军中，又有何人能与辅公祏这个二号人物相比肩。

纵然在此之前，杜伏威大力提拔阚棱、王雄诞等年轻将领，用以制衡辅公祏，且阚棱、王雄诞二人能力出众，战功卓著；但毕竟还是太年轻了，资历尚浅，尚不足以与辅公祏匹敌。要知道，辅公祏是何许人也？那可是一路和杜伏威血战江淮的元老，要想轻易撼动他的地位，谈何容易。更何况，辅公祏在军中威望极高，势力早已根深蒂固。

所以此刻，辅公祏的心思，开始活泛了起来。他的想法很简单，杜伏威入朝，唐朝是不会轻易让他重返故地。江淮群龙无首，不妨抓住这个机会，趁机抢班夺权，取代杜伏威的地位，而后另立门户，与唐朝决裂。

然而，杜伏威似乎早已察觉到了辅公祏的图谋。虽然，辅公祏表面上一直求仙问道，不问政事；但是，杜伏威却对他非常不放心。他不相信，辅公祏会就此沉沦，自己一旦前往长安，以辅公祏的性格，肯定会上蹿下跳，挑起事端。因此，杜伏威不敢懈怠，早就提防着辅公祏的蠢蠢欲动。