眼见自己这边伤亡有些惨重，为了扭转局势，降低将士的伤亡，李道宗命令部下停止进攻，到附近山上砍树，利用树木包裹土壤做成一个个“土袋子”，将这些土袋子堆积在安市城外，随即唐军昼夜不停地筑土山，总共用了六十天，用去劳力五十万人次，山顶离城只有几丈，可以向下俯瞰城中，李道宗随即命果毅都尉傅伏爱领兵驻守在山顶，以防备高丽兵趁势前来进攻。在这个高台之上，李道宗派遣五十名弓箭手无差别地俯射城内守军。
在这种情形之下，安市城守军瞬间感到崩溃，此前丢木头的战术已然失去了作用，毕竟人纵然力气再大，也无法将木头向上丢。随着土山越堆越高，根基不稳之余土山坍毁压向城墙，顷刻间将城墙崩塌，谁知正赶上傅伏爱私自离开营所，高丽几百名士兵从城墙缺口处出来迎战，面对近战犀利的步兵，五十名擅于远战的弓箭手瞬间被对方剿杀，随即安市城守军占据了土山，并迅速挖沟堑守护。
眼见原本十拿九稳的事情功亏一篑，无奈之下李道宗手持战报亲自来到李世民面前请罪，请求李世民惩罚自己而饶恕麾下的士兵，谁知李世民虽然在后阵观望，现场的情况却是看的一清二楚，孰是孰非李世民自然是心中有数，宽慰了李道宗一番之后，李世民遂命人将擅离职守的果毅都尉傅伏爱擒获，并当着大军的面亲自处斩了此人，随即下令麾下士卒夺回高台。
面对眼前这座比安市城城墙还要高的高台，大唐将士接连冲锋多次未果，高台下的道路上布满了大唐士卒的尸首，鲜血顺着高台一直流到高台下的土地上，整个高台被鲜血染成了红色。
而就在李世民这边拼死攻城的同时，此前薛仁贵早已带着修罗铁骑在安市城通往平壤城的官道附近埋伏了将近一个月，援军没有遇到多少，反而是击杀了不少前来安市城刺探军情的斥候，得知官道上有埋伏，一时间平壤城内再也不敢派斥候出来，没有了消息来源，这不免让平壤城内的渊盖苏文忧心不已，如若安市城被拿下，估计平壤城也就是旦夕之间的事情。
不过转念一想，安市城地势险要、士兵精良，而且其城主智勇双全，当初自己叛乱时，城主不服命，自己率领麾下大军久攻不能取胜，待取得大权之后，自己并未因为此人当初抵挡自己而责罚他，反而是将安市仍旧交给对方管理。念及于此渊盖苏文只得自我安慰，而心中则是默默祈祷，祈求安市城能够顶住大唐的进攻。
眼见即将进入九月，而一旦进入九月，可谓是深秋了。而高句丽的深秋之后马上就要迎来大雪纷飞的寒冬。寒冬时节，后勤补给就成为非常麻烦的事情，故而对于远征高丽而言，每年只有几个月的时间，过去这段黄金时间之后，如若还没有达成目标，那么必须放弃，否则继续攻击，即使敌人不把自己击垮，此地恶劣的天气便是最好的敌人，君不见当年前隋一战未死多少人，反而是因为隋炀帝的一意孤行，导致大军冻死冻伤无数。
而此时大军始终进攻无果，安市城就像是一个乌龟壳一般，任凭大唐军如何敲打也无济于事，无奈之下，鉴于辽东一带早寒，草木干枯水结冰，士兵马匹都不宜久留，而且粮食快要用光了，癸未日（十八日），李世民敕令班师还朝。
首先让辽东、盖牟二城的百姓举家渡过辽水，随即在安市城下显耀兵力而后凯旋，城中高句丽人都藏身不出。
得知大唐军终于撤退，安市城的城主登上城楼答礼为唐军送行，李世民称赞他能够坚守城池，赐给城主绸段一百匹，用来鼓励他事奉高丽国王。
为了防止高句丽人趁势前来袭扰，李世民留下四万大军殿后，而楚墨风则是命令薛仁贵率领修罗铁骑在殿后大军的侧翼掠阵，以防备对方绕背袭击。
乙酉日（二十日），大唐军移师至辽东城。丙戌日（二十一月），本部尽数渡过辽水，谁知时值深秋，辽泽一带道路泥泞，车马难以通行，李世民遂命长孙无忌率领一万人割草填道，水深的地方用车做桥梁，而李世民则是亲自将薪木等拴在马鞍后帮助铺路。
冬季，十月，丙申朔（初一），李世民本部到达蒲沟停下，为了加快行程遂督促填道铺路的各路军渡过渤错水，不料却赶上天降暴风雪，士兵们衣湿多被冻死，心中悲痛不已的李世民敕令在道上点上火堆，以供行进的士兵烤火取暖。
马车缓缓地前行，李世民的车驾上，大唐皇帝李世民与贤王楚墨风并排而坐，望着车窗外时不时飘落的雪花，李世民不免叹了口气，此次征伐高句丽，先后攻克玄菟、横山、盖牟、磨米、白岩、辽东、卑沙、麦谷、银山、后黄十座城，迁徙辽、盖、岩三州户口加入唐朝户籍共七万人。新城、建安、驻骅三次较大的战役，杀死高丽兵四万多人，唐朝将士死近二千人，战马损失十分七八。对于一生征战无往不利的李世民来说，这样的战果是十分不满意的，念及于此李世民亲自为楚墨风斟了一杯茶水，而后忿忿地说到“朕觉得这一次有些仓促了，如若魏征在的话，不会让我此番出兵的！”
听了李世民的话，楚墨风