因为对付突厥人的战争大获全胜，李靖有功被封为卫国公，红拂女妻因夫贵也被封为一品夫人，这是唐太宗贞观四年的事情。
　　然而就在此时，御史大夫萧瑀上书弹劾李靖，说他在破敌之后，没有能够把突厥的珍宝妥善搜集，从而使战果失散。唐太宗为此责备了李靖，李靖一时负气，索性托病隐居在长安城西四十里外风光明媚的羡陂山麓，与红拂女悠游林泉，过着自由闲散的生活。
　　功成名就，别无所求，李靖与红拂女整日栽竹种花，闲谈品茶，不再奢求什么；每每想起昔日往事，只觉恍如一场春梦。这样的日子不知不觉过了五年，到了贞观九年，盘踞在青海一带的另一支游牧民族吐谷浑兴兵侵犯大唐边境，唐太宗决定派遣大军前往征剿，选将时他又自然想到了李靖。
　　李靖此时已经六十五岁高龄了，而且红拂女正在病中，李靖不忍心撇下爱妻远征，因此有推托之心。明晓事理的红拂女，强撑着病体力劝丈夫以国事为重，不必挂牵自己。就这样李靖又担任起西海道行军大总管，带领大军直驱边境，越过黄河的发源地——积石山。终于生擒了土谷浑可汗。
　　班师凯旋归来，几经命运起伏的李靖早已不贪恋功名，仍然要求回到羡陂山。从此他们夫妇二人封闭在自己的小天地内，不涉尘世，连亲戚故旧也很少来往。红拂女的病情却一直未见好转，李靖每日亲自煎熬汤药，细心照顾。
　　就在这时，一天忽然听人说起有人率海船千艘，甲兵十万，突入海中扶桑国，杀其国王而自立称帝，已建立了稳定的政权。李靖与红拂女心中明白，这一定是虬髯客已经在海外另有发展；于是设置香案，虔诚地洒酒向天，遥向东南方祝拜，祈祷上苍保佑他们三哥成就伟业。
　　红拂女的身体时好时坏地拖到贞观十四年，在一个秋风肃杀的黄昏，终于撒手人寰，只留下个李靖伤心欲绝，生趣全无，仿佛他的心已随着爱妻逝去。
　　为了表彰红拂女佐夫之功，唐太宗下令在她的墓前筑起突厥境内的铁山和吐谷浑境内的积石山模型，并命魏征撰写墓誌铭，自己亲手题下“大唐特进兵部尚书中书门下省开府仪同三司卫国公李夫人张氏之碑”的碑名。红拂女歌妓出身，却能独具慧眼，认定李靖与虬髯客，得享盛名。