耶律大石说道：“我说了此事自愿，愿意去镇州的跟我走。”
现场的人都愿意，一清点，还剩下一万多士兵和百姓，耶律大石和杨怀兴率领三千多人马去攻打东面的祥州，引开金军，其他人继续北上泰州。
攻下祥州后，耶律大石让杨怀兴率领一千人马，大张旗帜，假装北上攻打阿什城，然后折向西北返回泰州。他自己率领两千多人马急奔上京城。
上京城的金军没有防备，很快被攻下，耶律大石抓住窝翰和稍合住二人，问道：“皇帝在哪里？”
窝翰答道：“他已经病死了。”
耶律大石一脸怒气，“我杀了你两个叛徒。”
二人扑通跪下，“大石，我俩并未做坏事，只是投降过个安稳日子。”
耶律大石没有理睬二人，率军返回泰州，完颜两兄弟也没追击。
过了几天，耶律大石得到消息，婆卢火率领两万多金军和女真百姓直逼泰州，耶律大石心想这金国想在泰州长期屯田戍守，堵死他东进之路。
耶律大石立即召集众人开会，耶律大石决定放弃泰州和长春州，马上返回镇州，众人都不明白。
杨怀兴说道：“大哥，我们这样做就前功尽弃了。”
耶律大石说道：“现在女真人正是强盛之时，我们应该避其锋芒，养精蓄锐，待机而动。”
耶律松山说道：“如果我们就这么撤走，那支持我们的百姓就会受到报复。”
耶律大石说道：“如果愿意和我们走的，就派军队护送他们到镇州居住。”
耶律大石让杨怀兴和耶律松山护送百姓先走，奥古野也决定率领黄头室韦部迁往镇州。”
耶律大石率领两千人马留在泰州城等待耶律五哥和阿苏返回，阿苏很快带领一千女真族人返回，直到金军快到泰州了，耶律五哥也未回来，耶律大石决定立即撤退。
这一天，耶律大石率军沿龙驹河来到一片草地，草地北面就是戈壁，耶律大石觉得此地很安全，就让士兵下马脱掉盔甲好好休息一下。
大概半个时辰，忽见北面戈壁冲过来一支几千人的骑兵队伍，每人一把弯弓，边跑边射，耶律大石立刻让士兵披甲上马迎战，这支队伍并未冲进辽军阵营，而是在几十米处对辽军狂射，辽军士兵纷纷中箭。耶律大石组织军队进攻，这支队伍却分散后撤，边撤边射，辽军无法靠近，当辽军后撤时，这支队伍又在后面保持一定距离追杀。
就这样来回十几次，辽军士兵疲惫不堪，已有一半人中箭，耶律大石一看这支队伍是想把辽军活活拖死，马上命令士兵原地不动，与其对射。