这时，北齐大将斛律光等人率援军赶到，组织反攻。齐军挖掘地道攻至城墙下，城墙坍塌十余步，将士们正准备乘势而入。就在这千钧一发之际，高纬却突然下令暂停进攻。原因令人啼笑皆非：他要等冯小怜梳妆打扮完毕，前来观看这的一幕！等到冯小怜慢条斯理地装扮完毕来到阵前，北周军队已经用巨木堵住了缺口，齐军错失了最佳战机。

随着战事不利，高纬的猜忌心开始作祟。他听信谗言，认为战功赫赫的兰陵王高长恭有谋反之意。这位以容貌俊美、勇冠三军着称的亲王，曾在邙山之战中率领五百骑兵突破北周军重重包围，解了洛阳之围。当时齐人作《兰陵王入阵曲》歌颂其勇武。然而功高震主，高纬派人赐下毒酒。高长恭饮鸩前悲愤地说：我忠以事上，何辜于天，而遭鸩也！其妻郑氏劝他面见皇帝解释，他叹息道：天颜何由可见！遂饮鸩而亡。

紧接着，另一位北齐支柱、号称落雕都督的大将斛律光也遭遇不测。斛律光家族世代为将，其女为高纬的皇后。他治军严明，屡破北周军队，深得军民爱戴。北周名将韦孝宽对他十分忌惮，使反间计散布谣言：百升飞上天，明月照长安。（百升为一斛，明月是斛律光的字）高纬听信谗言，设计将斛律光诱至宫中，派武士从背后将其杀害，随后诛灭其族。听闻斛律光的死讯，北周武帝宇文邕大喜过望，当即下令大赦天下。

自毁长城的恶果很快显现。公元577年正月，北周大军直逼邺城。在这生死存亡的关头，高纬展现了他最后的：他将皇位禅让给自己年仅八岁的儿子高恒，自称太上皇。这并非为了组织有效抵抗，而是为了在城破时方便逃跑。果然，当北周军队开始攻城时，高纬带着冯小怜等数十骑仓皇出逃，准备投奔南方的陈朝。

逃亡路上，这个荒唐君主依然不改本色。在青州（今山东青州）休息时，他还不忘与冯小怜温存，并信誓旦旦地说：只要美人无恙，江山何足惜？然而他们的行踪很快被北周军队发现，最终在青州南部的邓村被俘。当被押解到北周武帝面前时，高纬提出的唯一请求竟然是：乞归还朕之小怜。

北周武帝宇文邕轻蔑地看着这个亡国之君，说：朕视天下如脱屣，岂惜一老妪！但还是将冯小怜还给了他。不久，有人诬告高纬谋反，宇文邕顺势将其父子以及高氏宗族全部处死。只有高纬的弟弟高仁英因是白痴，高仁雅因是哑巴而被放过，流放蜀地。

随着高纬的人头落地，立国仅二十七年的北齐王朝正式退出历史舞台。这个曾经拥有最强军队、最富庶经济、最完备法典的王朝，最终以最荒诞不经的方式走向了灭亡。高纬用他的一生证明：当一个国家的最高权力落入一个毫无责任感的顽童手中时，再强大的国家机器也会在短时间内土崩瓦解。