曹操本来就不舍得杀韦小宝，又担心他和郭嘉关羽等人交情深厚，担心杀了韦小宝，将来这些人就再也不会投靠自己，便一再犹豫，迟迟不肯动手，只是每天行军之余，便跑去韦小宝的帐中陪他喝酒。
韦小宝也看出来曹操不愿放自己走，不过诸侯联军的行军方向刚好就是往洛阳去，韦小宝也就一边与曹操同行，一边找机会逃跑。
这一日，阵前传来战鼓声和喊杀声，韦小宝急忙去打探消息，才知道军队已经来到虎牢关，此时刘备兄弟三人正在关前与吕布厮杀。
韦小宝心想：“老子是没机会亲眼看看这出三英战吕布的好戏了，这时候正是逃跑的好机会。”
曹操早已经暗中布下监视看管韦小宝的守卫，不过已经被双儿全都解决了。
韦小宝趁着曹操和各路诸侯在阵前督战的机会，和双儿偷了两匹马逃出军营，等着曹操喝完庆功酒回来的时候，就收到了韦小宝出逃的消息。
曹操悔得肠子都青了，问清楚韦小宝二人是往洛阳方向逃跑，也来不及多想，带着手下将士一路追赶。
韦小宝料定曹操会来追赶，过了虎牢关之后就跟双儿一起往北边而去，准备绕个大弯折回洛阳。
曹操追至半路，收到洛阳传来的消息，董卓担心虎牢关失守，早已经带着刘协逃去了长安。本来是为了追韦小宝，此刻更是趁机诛杀董卓救驾回宫的好机会，曹操更是一口气往长安方向追去，却不想路上中了埋伏，七个宝石换来的兵马几乎损失殆尽。
曹操逃回虎牢关的路上，想起韦小宝，对身边的荀彧感叹道：“若是韦小宝在身边，又怎么会中了贾诩的伏兵计！袁绍胸无大志，我也不想再与他为伍，只是现在损兵折将，我们又能去哪里呢？”
荀彧等人也一时没有主意。
曹操想起韦小宝那句“从哪里来回哪里去”，点点头说道：“难怪他舍我而去，定然是知道我有此一败。我起兵山东，眼下不如再回山东休养生息，等着郭嘉来投，再做图谋。”
曹操率领残部回了山东，韦小宝也已经和双儿赶回洛阳。
不过此时的洛阳，却不是当初离开时候的景象。街道上，到处都是焦黑的瓦砾和残破的断木，远处的屋顶上，尚未熄灭的火苗还在跳动着。北宫也在这场大火之中消失不见，刘协和朝中官员更是下落不明。
韦小宝四处打听消息才知道，董卓挟持刘协逃去了长安，走之前还放火烧了洛阳城。此外，韦小宝还听到了传言，董卓逃走之后不久，孙坚的军队就进了洛阳，在北宫的废墟之中找到了丢失许久的传国玉玺。
韦小宝在洛阳城里越走越害怕，满目之中全是惨烈景象。韦小宝生在扬州，从小就听人说过清兵当年犯下的扬州十日、嘉定三屠罪行，不过他也只是当故事听听，无法感同身受。
如今站在废墟之中，韦小宝第一次对战争产生了恐惧。