“张姑娘之言，正合我意。我在主府心怀韬晦之计，以屈求伸，如今已被姑娘识破，我愿网你一起前往河东。趁天色微明，你我赶快逃走吧！”
当下李靖收拾细软，红拂女又穿好男装，打点停当，俩人一同出走。王府守门家人和李靖很熟，以为他早起带了童子出外办事，也不必细问，就放了出去。等到次日发现二人失踪，已经追之不及了。这就是前文中所提起过讲昌平王邱瑞上朝路过越王府时听说的所谓李靖拐走歌姬红拂女的事情。
话说，李靖和红拂女出了王府，先到市上买了两匹骏马，二人扬鞭催马，往东北方向飞驰而去。一路上晓行夜宿，饥餐渴饮。人们都当他俩是一对夫妻，实际上他俩只有夫妻之名，尚无夫妻之实。他们是英雄爱侠女，惺惺惜惺惺，情投意合，心心相印。过了些时日，俩人终子来到了河东太原郡愉次县灵石镇。见到了虬髯客，红拂女把李靖的来历向哥哥一介绍，虬髯客那份高兴劲儿就甭提啦！三人落坐，饮酒谈心你说话合我的心，我说话中你的意，说什么事都说到一块去了。
大家都已听到从京城来的传闻，说越王杨素和承相宇文化及帮助杨广弑父鸩兄，谋夺篡位，忠孝王伍建章上殿痛骂昏君已被敲牙割舌，满门抄斩，如今杨素、宇文恺二人又奉旨强征天下民工建造东都洛阳显仁宫。说到这里，虬髯客详细地问了问越王杨素的性格癖好，起居习惯以及越王府的庭院设置、围墙道路等等一切情形。听罢，虬髯客哈哈一笑道：“妹妹，还有李公子，你们二位在此等候一时，我即刻遘奔长安城，去取走奸贼杨素的脑袋去。”李靖和红拂女齐声道：“兄长要多加小心。”
在前文在“披香舞”中已然提起过，靠山王杨林从金堤关败下阵来，回到京城，到了越王府，家人告诉他府里出了天大的祸事：那一天晚上越王安歇之后，第二天清早发现王爷的人头不翼而飞！杨林放声痛哭三弟杨素，派人四下辑拿凶手，遍寻不得，只好留作悬案。这割走杨素首级的不是别人，正是虬髯客。
话说，虬髯客那一天夜里三更过后偷偷翻墙跳入越王府，摸进杨素的卧室，痛快淋漓地干了此事。他把人头上的血擦了擦，又空了空，用个油布包袱裹好，提着包袱跳出墙外。天一亮，他就骑马奔灵石镇去了。李靖和红拂女在这里等了他约摸个把月，这一天，见他提溜个包袱回来，知道大功告成，三个人暗地里找块荒坡把杨素的人头给埋了。他们的房东、虬髯公的那位朋友也知道了这件大快人心的事，暗自拍手称赞，对他们三人倍加敬重。
有一天，虬髯客对妹妹红拂女和李靖道：“如今普天之下滥官污吏横行，唯有这太原一隅百姓还能安居乐业，听说这位唐公李渊任侠好客，爱民如子，我们何不到太原城里看个究竟。太原西门里天雷寺有个明德长老，去年他游方至此，我俩交上了朋友。我们一起去看看他。”
李靖和红拂女都同意前往，三个人收拾收拾，就直奔太原去了。走了一两天，进了太原城，找到了天雷寺。虬髯客见到这里当家的明德长老，施礼已毕，又把李靖和妹妹红拂女介绍给长老，一一见礼。长老叫小和尚腾出一所跨院，三兄妹就在这里住下了。
这时候，明德长老还有两个远道而来的朋友住在庙里，一个叫袁天罡，一个叫李淳风，都是当时道家的名士，深通天文、地理、阴阳、历算之学。明德长老把他们介绍给了张氏兄妹和李靖，彼此见礼，落坐叙话。大家一开口就谈起了天下大事，国家危难，谈得非常投机。谈着谈着就谈到太原侯李渊这里，都说现在天下生灵尽遭涂炭，唯有这河东一带由唐公李渊治理，老百姓可算是烧了高香，享了洪福啦！这几个人住在庙里，经常一起谈论治国安邦之策。虬髯客把一些用兵演阵的海外奇书口传给李靖，李靖长了许多见识。
这位明德长老最爱下围棋。这围棋又叫大棋，黑白二子，九星三百六十