根据李纯的五款方案，再加入：“善后大借款如果成立，应依照关税余款分配西南百分之十三的旧例办理。”一条作为谈判基础。
  可是段祺瑞却反对徐、靳的主张，段以前一直是极端地反对上海和会的，现在忽然摇身一变，极力主张仍应在上海谈和，主张一切问题应由上海和会解决。而皖系健将，上海的“地方首脑”卢永祥也和旧国会的议员们成为好朋友，卢永祥公开建议解决时局的方法是新旧国会的合并，在上海共同制宪。
  时局的发展，把一个最倒霉的人救活了，这就是安福系的首领，北方议和总代表王揖唐。他本来大张旗鼓到上海，不料南方代表根本不承认他的地位，任他巧语花言，任他费尽心机，南方代表就是一百个不理，使他不只感到乏味，而且进退维谷。现在广州的国会议员到了上海，正是走投无路的时候，他仍出面四处连络，他手头有钱，钱可通神，于是他的局面也活跃起来。
  前面曾提到，王揖唐抵沪后是下榻上海富翁、犹太人哈同的花园中，据说王且把自己女儿拜哈同为义父。这位哈同的义子义女甚多。王揖唐在哈同公园中寄居时，曾遇到一次炸弹案，他疑心有人向他谋刺，更疑心谋刺案与江苏督军李纯有关。李纯听到此讯，大为光火，乃函王云：“公以小人之腹，度君子之心，仆即有恨于公，何至下效无赖之暗杀行为，况并无所憾于公乎？”李函并不使王释然，王揖唐总认为李纯对他不怀好意。
  4月16日伍廷芳、林森到上海后，国民党召开紧急会议，研究进一步否认军政府在法律上的效力。由于军政府的组成是以七总裁为基干，最高行政机构政务会议须有过半数的总裁出席才有效，现在广州只留下岑春煊、林葆怿两人，而林葆怿也已宣布辞职，所以国民党认为广州的政务会议是没有效的。
  广州方面的解释则不然，广州的政务会议说：七总裁中孙中山已经辞职，唐绍仪根本就没有就职，所以军政府的总裁只有五位。现在在广州军政府这一方面的，还有岑春煊、陆荣廷和林葆怿三位，所以还是多数，因此政务会议是合法的。这当然是强辞夺理。为了要凑数，有一部分人主张索性把军政府改组为清一色的桂系，补选广东督军莫荣新、广西督军谭浩明为总裁。这当然是走极端的一法。岑春煊是陆荣廷的长官，陆荣廷又是莫荣新和谭浩明的长官，这四位同为总裁，就变成三代同堂了。所以莫、谭均以“不敢和长官并驾齐驱”为理由推翻了这个建议。
  5月4日，广州国会补选熊克武、温宗尧、刘显世为总裁，以补孙中山、唐绍仪、伍廷芳之缺。熊代表四川，刘代表贵州，温代表北方。四川和贵州是和云南一致的，广州故意选出熊和刘，是有意分化滇系。
  在上海召开国会的计划受到了打击，由于广州方面委托律师在香港控告伍廷芳卷走公款，因此伍廷芳汇存到上海汇丰银行的存款被判决假扣留。没有钱不能办事，这是最伤脑筋的。5月5日，到沪议员召开谈话会，决定国会迁滇，并发表宣言，否认广州的军政府和国会。
  6月2日，孙中山在私邸召集唐绍仪、伍廷芳、李烈钧及唐继尧的代表举行会议，旧国会议长吴景濂、林森、王正廷、褚辅成都被邀参加，会议决定由孙、唐、唐、伍四总裁发表联合宣言，全文如下：
  “自政务总裁不足法定人数，而广州无政府。自参众两院同时他徙，而广州无国会。虽其残余之众，滥用名义，呼啸俦侣，然岂能掩尽天下耳目？即使极其诈术与暴力所至，亦终不出于两广。而两广人民之心理，初不因此而淹没，况云南贵州四川，固随靖国联军总司令为进止，闽南湘南湘西鄂西陕西各处护法区域，亦守义而勿渝。以理以势，皆明白若此，固知护法团体，决不因一二人之构乱而涣散也。慨自政务会议成立以来，徒因地点在两广，遂为一二人所把持；论兵则惟知拥兵自固，论和则惟知攘利分肥，以秘密济其私，以专横逞其欲，护法宗旨，久已为所牺牲，犹且假护法之名，行害民之实，烟苗遍地，赌馆满街，吮人民之膏血，以保骄兵悍将之愿，军行所至，淫掠焚杀，乡里为墟，非惟国法所不容，直人类所不齿。文等辱与同列，委曲周旋，冀得一当，而终于忍无可忍，夫岂得已？惟既受国民付托之重，自当同心戮力，扫除危难，贯彻主张……”
  同时，唐绍仪备了公函送达北方总代表王揖唐，要求恢复和谈。
  6月6日，广州军政府政务会议议决：撤换南方议和总代表唐绍仪，改派温宗尧继任；通告北京政府，南方政务总裁孙中山、唐绍仪、伍廷芳三人的总裁资格业已取消。并且发出急电云：
  “王揖唐为北方议和总代表，此间始终并未承认，而唐绍仪复经撤销总代表，所有唐、王私议之和平条件，不能发生效力。……上海租界内所称之军政府，除唐继尧未辞职外，唐绍仪始终未就职，孙文业于八月间辞职，伍廷芳于本年三月间卷款弃职，经于五月四日由国会非常会议宣告免职，另行改选。孙、唐、伍三人所有宣言及一切行动均属无效。”
  广州的一举一动，在北京的徐世昌是赞成的，可是段祺瑞和安福系都予以冷淡。段系对上海的发展寄有极大的兴趣，唐绍仪给了王揖唐恢复和谈通知后，唐、王就互相拜访，谈得非常投机，昨天还是路人，今天却变成了老友。这种友好性的接触，显示出前途的乐观，双方似乎均本着互相忍让的精神，提出对方可以接受的条件，期使和谈获有具体结果。段祺瑞还直接回答了孙、唐、唐、伍四总裁一封电报，赞成恢复上海和谈。
  徐世昌则对上海的发展表示冷淡，6月7日他叫国务院致电王揖唐，提出了四点质问：（一）唐绍仪的和谈总代表资格问题，唐原由广州军政府所委派，现在唐否认广州军政府的存在，则唐本身地位来自何处？（二）孙、唐、伍诸总裁或久已辞职，或现已离任，现在聚集上海私邸开会，上海又不属于西南范围。则诸公所议各项是否能发生效力，而西南各方对于此项集议，是否一致赞成？（三）孙、唐、伍三公既否认两粤现行机构，则上海和议一旦有成，两粤能否一致奉行而无反抗？（四）唐绍仪总代表上年所提八条，中央迭次抗争，和议因之中梗……。今少川（唐绍仪号）宣言仍以八条为据，遽与开议，是否有前后矛盾之嫌？以上四点统希核复，再酌应付。从这通电报中看出徐世昌是不愿以上海三总裁及唐绍仪的议和代表为对象。
  6月7日下午安福系推出议员20余人见徐，请徐明告对上海和会的态度，徐竟不接予接见，议员们坚持要见，僵持到夜晚10时，总统府秘书长吴笈孙才跑出来作揖打拱说：“元首有病，请诸位明天来。”6月8日安福系要员在太平湖开会讨论上海和会和应付徐世昌问题，曾毓隽认为徐世昌只以岑春煊为对象，不支持上海和会是破坏和平，主张国会提出弹劾破坏和平的总统。经讨论后，改为推举两院议员见徐质问不重视上海和会的理由，同时两院通电赞成上海和会继续进行，以便早日达成协定。于是李盛铎、田应璜、刘恩格前往访徐，徐向他们吞吞吐吐地表示：（一）政府对王揖唐并无不信任之意。（二）南方军政府发生内乱，北京政府当然可以置身局外。（三）南方军政府改派温宗尧为南方总代表，北京政府尚未承认。
  一六四、吴佩孚衡阳撤军
  吴佩孚衡阳撤防是改变南北形势的一个惊人行动。后来吴成为北洋时代风云人物也是由此开始。
  吴师撤防是从9年5月20日开始。吴事前曾电请张敬尧派员到衡州协商接防问题。张敬尧派湖南暂编第二师师长（北军）吴新田为“主持湘南防务司令官”，于21日到衡州，与吴佩孚及湘军代表签订条约，南北两军维持原有停战界线，湘直两军停战协定继续有效。一直到吴师自动撤防的前夕，北京政府才有电报批准直军撤防。吴师开拔时作环次队形的布置，主力第三师居中，湘江两岸各设掩护队，前方设有侦察线，后面设有殿卒，大军扬帆而下，全军齐唱吴所亲撰的《登蓬莱阁歌》。
  吴有《回防途次》诗曰：
  行行重行行，曰归复曰归。江南草木长，众鸟亦飞飞。忆昔赴戎机，长途雨雪霏。整旅来湘浦，万里振天威。孰意辇毂下 ，妖孽乱京畿。虺蛇思吞象，投鞭欲断淝。我今定归期，天下一戎衣。舳舻连千里，旌旗蔽四围。春满潇湘路，杨柳正依依。和风送归鸟，绿草映晴晖。少年惜春华，胜日斗芳菲。来路作归程，风景仍依稀。周公徂东山，忧搀亦畏讥。军中名将老，江上昔人非。建树须及时，动静宜见几。何日摧狂虏，发扬见国威。不问个人瘦，惟期天下肥。丈夫贵兼济，功德乃巍巍。江上送归舟，风急不停挥。得遂击楫志，青史有光辉。春日雁北向，万里动芳徽。鸿渐磐石愿，衍衍不啼饥。止戈以为武，烽烟思郊圻。同仇复同仇，归愿莫相违。
  吴师于5月20日开始撤防北归，27日由水路经过长沙。张敬尧怕他舍舟登陆，战长沙，夺帅印。所以在湘江右翼配置了强大的兵力，但只作防御准备。而吴师根本无上岸打算，虽亦作紧急戒备，不过是怕张军袭击而已。双方均未挑衅战火，吴师乃扬帆而去。
  吴师于5月29日过岳州，也未停靠，31日集中汉口，由于车辆缺乏，一直到6月5日才开始向北移动。
  吴佩孚虽然请张敬尧派军接防，可是实际上他是决定把衡阳移交给湘军的。