山西情势危急，李世民心中如焚，他想上书李渊，自行请缨带兵入山西收回失地。
观音婢看到李世民坐卧不安的样子，劝慰李世民，“你说大唐的天下，是谁的天下？”
李世民道，“当然是阿爷的天下？”
观音婢笑看着李世民，“那将来呢？”
李世民不假思索答道，“大兄身为太子，是名正言顺承继大统之人。”
观音婢又问，“守卫山西是谁的职责？”
李世民道，“四弟是并州总管，确保山西稳固当然是他的职责所在。”
观音婢笑眯眯的看着李世民，“那么世民阿兄说说，阿爷以什么理由派你去山西呢？难道让阿爷说，四叔难以胜任吗？”
“如果阿爷说四叔难以胜任，而让你去，那么你就得罪了四叔，他会恼你一辈子。”
“阿爷不傻，只有四叔自己说不行的时候，才有可能让你去。”
“如今最大的可能是，阿爷会派他最任何的人去协助四叔。”
李世民听了观音婢这一番分析，感慨地道“阿婢遇事总是比我冷静，正如阿婢所说，我是关心则乱，当局者迷。看到一个个坏消息传来，我实在是静不下心。”
观音婢劝道，“世民阿兄静不下心时，就多读几遍《本经阴符七术》，和幕僚们商量一下，假如有一日命你接手山西、河东，你如何收拾这个烂摊子。”
事情的发展果如观音婢所料，李渊杀了刘文静之后，仍然没有启用李世民的想法，他苦思冥想也找不出合适的人选。
就在这时，裴寂毛遂自荐愿意到山西去。
裴寂只所以毛遂自荐，是因为他有自己的打算。
裴寂的根基在山西，他的家宅田产都在那里，如果山西不保，他经营半生的心血倾刻不保。
再就是自晋阳起兵以来，别的开唐元勋都有战功，只有他没有军功，他想趁此机会立些军功，巩固自己的地位。
李渊对裴寂最是亲厚，对他极是信任，便任命裴寂为晋州道行军总管，讨伐刘武周，授以大权任其便宜从事。
裴寂率军通过雀鼠谷，到达介休城外，宋金刚占据介休城进行防御。
裴寂不懂军事，将大军驻扎于度索原，军营中饮用的是涧水。
宋金刚派人查看地形，了解到这种情况之后，截断裴寂驻军的水源。
唐军士卒断水以后，难以忍耐，裴寂下令将军营移到靠近水源的地方。
裴寂在转移大营的时候，也不做好防备，宋金刚在城上看到正在拔营的唐军没有一点章法，乱作一团，趁机率军进行攻击。
唐军毫无防备，顿时溃不成军，全军几乎损失殆尽，裴寂与少数部属侥幸逃脱，一日一夜逃到晋州临汾城。
以前，刘武周多次派兵攻打西河城，浩州剌史刘赡据城坚守，行军总管李仲文率军到西河城，与刘赡共同守卫西河城。
待到裴寂兵败，晋州临汾城以北，只剩下晋阳和西河没有沦陷。
武卫大将军姜宝谊再次被宋金刚俘获，这次宋金刚不再手下留情，当即将姜宝谊杀害。
姜宝谊是继刘文静之后，第二个死去的晋阳起兵元勋。
裴寂逃到临汾之后，上表向李渊请罪，李渊却未降罪于他，好言安慰裴寂胜败乃兵家常事，仍让他镇守河东。
刘武周的军队接连获得胜利，气势正盛，他亲自率兵南下，准备围攻晋阳。
此时的晋阳已是孤城一座，在没有外援的情况下，想守住晋阳很难。
宇文歆向李元吉建议，不如弃城而去，这正中李元吉下怀，他当即同意宇文歆的想法。窦诞开始极力反对，认为这种做法是违犯圣命，逃到长安必是死罪。
宇文歆问窦诞，“将军以为是晋阳城重要，还是齐王殿下的命重要？”
“丢了晋阳城，以后还可以设法夺回来，齐王要是有个三长两短，却不可再挽回。”
窦诞权衡再三，宇文歆觉得说得有理，晋阳城重要，但是齐王的命更重要，他只好听从宇文歆的建议。
三人达成共识之后，商定了弃城的方案。
第二日李元吉下令召集精兵强将，将自已的妻妾扮伴士卒，由亲兵守卫。然后，李元吉命令行军司马刘德威，“你带领老弱士卒守城，我带领强兵出城作战，你定要守好城池，不得有失。”
刘德威不知是计，便依令而行。
到了晚上，李元吉率领精兵护卫着妻妾连夜出城，率军逃回长安。
李元吉弃城而逃不久，刘武周便率大军来到晋阳。晋阳豪强薛深率人献城而降，刘武周兵不血刃占领晋阳。
刘武周占领晋阳以后，派宋金刚攻打晋州临汾，临汾随之沦陷。接着宋金刚又攻陷龙门，大军进逼绛州城。
李元吉弃晋阳逃回长安，李渊大怒，对礼部尚书李纲道，“四郎年幼，不通世事，朕才派窦诞、宇文歆前去辅佐。晋阳是大唐的根基所在，精兵数万，粮食无数，他们竟然就这样弃城而去，听说是宇文歆出的主意，朕当斩之。”
李纲向李渊进谏，“齐王年少，骄狂不羁，窦诞不加劝谏，还为殿下掩饰，致使失去民心，有今日之败，实是窦诞之罪。宇文歆力谏，齐王殿下不听，他已如实奏明圣上，宇文歆才是忠臣，怎么能杀呢？”
李渊沉思不语，良久才慨然叹道，“如非听公之言，朕差点滥杀无辜。仔细想来，全是元吉的错，窦诞、宇文歆又怎能劝阻得了呢？”
于是，李渊将窦诞、宇文歆赦免，不再问罪。
到了十月，河北、山东也传来唐军失利的消息。
窦建德先后攻克相州、黎阳，大败唐军，俘获淮安王李神通、李世勣的父亲徐盖、魏征和李渊的妹妹同安公主。只有李世勣带领数百骑渡沁河逃走。
但窦建德以李世勣的父亲徐盖为人质，劝说李世勣投降，李世勣无奈之下只得也投降了窦建德。
此时，山西只剩西河一座孤城，河东也江河日下。
宋金刚攻下临汾后，接着攻下浍州。
裴寂是靠溜须拍马起家之人，性格软弱，无将帅之才。黔驴技穷之下，只得传书河东各州收拢百姓入城。
民心不定盗贼四起，夏县乱民吕崇茂聚众自称魏王，响应刘武周。裴寂派兵讨伐吕崇茂，竟为吕崇茂所败。
李渊只得下诏，命永安王李孝基、工部尚书独孤怀恩、内史侍郎唐俭等率兵讨伐吕崇茂。
蒲坂王行本，也与刘武周相呼应，至此河东也失陷十之六七。
眼看山西、河东大势已去，李渊这时才想起了李世民，他写来书信与李世民商议。
李渊在书信中对李世民道，“贼势强大，我军难与之争锋，二郎看是否应该放弃黄河以东，收缩力量全力守卫关中？”
李世民看到经自己一手开创的山西、河东几乎损失殆尽，实有痛心疾首之感。由于父亲李渊对自己的忌惮，李世民不便出头，只能眼睁睁看着多年的心血付诸东流。
如今李世民接到李渊的手书，即与房玄龄、杜如晦、长孙无忌商议该如何答复李渊。
众幕僚皆认为，李世民此时当迎难而上，自动请缨，力挽狂澜。
李渊亲自手书垂询，已到了李世民再次出山的时机，想到自己终于又有了施展才华的机会，李世民心中有几分悲怆，同时也豪气顿生。
回到寝殿，李世民将李渊的手书拿给观音婢观看。
观音婢看后，嫣然笑道，“世民阿兄心中作何打算？”
李世民将与房玄龄、杜如晦、长孙无忌商议的情况告诉观音婢。
观音婢幽幽地叹气，“阿婢只所以一直劝世民阿兄隐忍，实则是不得已而为之。不到万不得已之时，你向阿爷说再多，阿爷也不会启用你。”
“阿爷压制你也是出于一番好意，他是不愿看到将来你们兄弟手足相残。”
“假如这次阿爷同意世民阿兄领兵收复山西、河东，世民阿兄定要谨慎行事，不负阿爷所望，只能胜不能败。”
得到幕僚和观音婢的支持，李世民表奏李渊，“山西、河东，是开创大唐的根基所在，乃国之根本。”
“河东殷实富庶，是京师的依靠，如果轻易放弃，儿臣怀恨难平。至尊如愿让儿臣率精兵三万，儿臣必扫平刘武周，收复汾、晋失地。”
到了此时，除了让李世民挂帅出征，李渊还有其它的选择吗？
李渊御驾亲征吗？他自己也没把握，真是这样他还要带上李世民。
让太子李建成为帅吗？一是不合规矩，二是李渊对他用兵没有信心，一旦李建成失利，会引起朝野震动。
李渊只有一个选择，启用李世民。
李渊和朝廷重臣商议领兵出征的人选，李建成已得到幕僚的建议，不可轻言领兵出征。
几位重臣皆无良策，没有人再反对启用李世。
十一月中旬，李渊调集关中所有军队交给李世民统率，让其讨伐刘武周。
为壮行色，李渊亲自到长春宫为李世民送行。
李世民出征之后，李渊返回京师。
返京之时，将观音婢和李世民的所有家眷接回长安太极宫。
李渊只所以这样做，一是担心观音婢等人在长春宫没有照顾，二是怕李世民拥兵自重，他的妻儿都在长安，李世民会更听话一些。