福无双至，祸不单行，屋漏偏逢连夜雨。就在吴军主力对外作战连连失利之时，先锋官夫概领着他的嫡系部队悄悄地返回了吴国，发动政变称起王来。阖闾闻听大惊，只好率部分将士回国平叛。
虽然夫概的叛乱很快被阖闾平定，但由于留守楚国的部队已所剩无几，加之吴军自入楚之后如清代史家高士奇所言“仁义不施，宣淫穷毒”，致使“楚虽挠败，父兄子弟怨吴入于骨髓，争起而逐之”。也就是说，由于吴军在郢都无恶不作，渐渐陷于人民战争的汪洋大海之中。楚国逐渐得到了社会的同情与支持，楚军人数倍增，战斗力加强，并在秦国救援军的帮助下，开始由全线溃退转为战略进攻，逐渐形成了对楚都郢城的包围态势。面对楚秦联军强大的压力和步步紧逼，无论是伍子胥还是孙武都意识到，吴国已陷入了政治与外交的困境之中，要想长期占领统治楚国已不可能，如将楚国变为自己的殖民地，前景极其渺茫。于是，阖闾根据国内外的情况，果断下令伐楚远征军留守部队在做好善后工作的同时，实施战略大撤退，以保存吴国的军事实力，稳住国内的政治局面。孙武、伍子胥得令后，深觉所剩的残兵败将，脑子所想的皆是女人，算是曾经沧海难为水，除了女人，这个世界上的一切对他们来说什么都不感兴趣了，再继续坚持下去已不可能。于是，二人决定按阖闾的命令，开始有计划、有步骤地组织部队撤退。凡楚国的府库宝玉，全部装载运回。同时拿出主要精力，将万余家楚人全部迁往吴境，以充实吴国空虚之地。经过前前后后几个月的忙碌，驻守在吴国远征军的余部和万家楚国百姓安全进入吴境。