李世民在唐王朝统一天下的战争中立了赫赫战功，声望、地位和权势日增，对东宫太子建成的地位造成威胁。在平定天下的征战中，李世民不仅招揽了一大批武将，还从敌军中网罗了一批善战的将帅之才，如秦叔宝，尉迟敬德、屈突通、李君羡等人，这些被安置在李世民自己设的军事决策顾问机构“天策将军”府中，这些人都成了李世民的得力助手。
在攻取长安之后，李世民网罗了一批谋士，例如房玄龄、杜如晦，长孙无忌（李世民妻子长孙氏的哥哥）李世民在进军渭北的时候，房玄龄亲自到军营中拜见李世民，二人一见如故。
接下来，李世民封房玄龄渭北道行军记室参军，后升为陕东道大行台考功郎中，文学馆学士，后晋爵邗国公。
在李渊攻取长安后，李世民任杜如晦为府兵曹将军。杜如晦刚刚担任此职务，太子建成却向高祖李渊建议：“现在天下刚安定，各州县需要人去治理，秦王府中的人调的都差不多了，但治理好陕州还缺人啊！”
李渊问：“那你说调谁去合适？”
太子建成说：“秦王府的杜如晦是个人才，就凋他去。”
李渊说：“那你去安排！”
于是太子下令，杜如晦为陕州总管府长史，立即前往担任。
偶然的机会，房玄龄知道了杜如晦要从秦王府调走，赶忙去跟李世民说：“秦王府中调走的同僚虽然很多，但都不值得你可惜。可杜如晦这个人就不一样了，如果大王只想做个秦王，不想再有大的作为，也就用不上他了。如果大王要有志于天下，请大王将此人留住，今后必有用处。”
李世民大惊，说：“你如此重视杜如晦，他必是一个了不起的人物。”
房玄龄说：“杜如晦读过很多书，英俊豪爽，风流倜傥，内负大节，临机善断！”
李世民有些激动地说；“先生要是不说，险些失去了这个人才！”
房玄龄说：“现在知道还来得及！你赶快想办法将此人留住！”
房玄龄前脚离开秦王府，李世民就去找高祖李渊，说道：“现各州县需要人才治理，我秦王府的人都调走的差不多了，但是父皇，我必须留有一定才能的人，帮我处理日常事物。”
李渊问：“秦王府的人才还不够多吗？”
李世民说：“但像杜如晦这样的人才不多！望父皇准许，留杜如晦于秦王府中！”
李渊想了想说：“达成你的意愿，调杜如晦为秦王府中属官。”
李世民见父皇答应他的请求，道了谢，回到秦王府，召见杜如晦。从此把杜如晦当作自己的心腹，常常在帷幄之中一起参谋筹划。杜如晦在帮助李世民处理军政事物时，能够从容应对，决断迅速，颇受李世民赏识。
秦王李世民罗致四方文士，收聘贤才，以房玄龄、杜如晦、于志宁、苏世长、姚思廉、薛收、褚亮、陆德明、孔颖达、李玄道、李守素、虞世南、蔡允恭、颜相时、许敬宗、薛元敬、盖文达、苏勖十八人并为“文学馆学士”。
在李世民设立的“文学馆十八学士”中，杜如晦和房玄龄为十八学士之首。
对这十八位学士，李世民对他们以礼相待，给他们丰厚的赏赐，遇到重要问题时，都和他们讨论商量。向他们学习政治经验，因为李世民决定从崇尚军事转向政治。虽然这些人各有各的才华和个性，但他们有一个共同特点，那就是只听命于秦王李世民，有时候高祖的诏敕的帐他们都不买。
惹得李渊大发牢骚：“世民不是我过去的儿子了！他在外长期征战，使得他有了自己的势力，就连现在我他都不放在眼里了！＂大臣封德彝接话说：“陛下，有句话，不知老臣该说不说！”
高祖李渊说：“当说无妨！”
“凭老臣观察，秦王立有盖世之功，是不甘心居于太子之下的。”封德彝继续说：“秦王府的左右我看也都是不安分守纪的人！”
李渊沉默。
太子李建成的谋士魏征和王珪看出了李世民有志于天下的这一势头，于是向李建成建议：在山东结集豪杰，培育自己的地方势力。并勾结幽州的燕王罗艺和庆州总管杨文干，发展外部支持自己的力量。在朝廷内，李建成与李渊的心腹之臣裴寂，建立密切的关系，同时还取得执政大臣封德彝的信任。在朝廷大臣中，李世民也积极寻求支持者，得到大臣刘文静、陈叔达，萧禹等人拥护。因刘文静惹怒高祖，被高祖杀死了！
齐王李元吉也想当皇帝，但李世民的声望、才能，他只能望尘莫及。认为只有和太子李建成联合起来，扳到李世民了，对付李建成就容易了，他称帝的机会就大了。
在后宫中，李建成利用太子有利的身份，经常向在晋阳宫陪李渊醉卧的隋炀帝宫人张婕妤、伊德妃送礼，因为她们两个是后宫中最受李渊宠幸的妃子。叫她们两个在李渊面前说李世民的坏话。秦王李世民却没拉拢好后宫的嫔妃，嫔妃们经常在李渊面前说李建成和李元吉的好话，却说李世民的坏话。李世民因淮安王李神通有功，赏给他田数十顷，恰巧这时，张婕妤的父亲通过张婕妤向李渊要了这片田地，李渊也答应，并把这片田地赏赐给了张父。张父去向李神通要回这片田地，李神通拒绝说：“秦王赏我这片田地在先！没有给你的理由！”
无奈，张父只得去找女儿张婕妤帮忙，于是张婕妤向李渊告状说：“皇上亲自下手谕赐给我父亲的田地，被秦王夺将去给李神通了！”
李渊气愤地说：“有这等事！太不像话了，我说的话，竟然还不算数了！”于是对身旁太监总管德子说：“快去给我把秦王叫来！”
德子说了声“是”，出去了。
李世民来见李渊，李渊发怒，责问李世民：“我的手谕，难道还不如你的一句话吗？”
李世民看了看站在李渊身旁的张婕妤，似乎明白了几分，问李渊：“何事惹怒了父皇？”
“我赐给张父的田地，何故夺去给李神通？”李渊问。
李世民说：“李神通乃有功之臣，这是他该得的赏赐，更何况我赏赐李神通田地在先，你手谕赐田地给张父在后，凡事都有个先来后到的道理。”
李渊听李世民这样说，无话可说，叹气说：“好了，你先退去！”
张婕妤见李渊没向李世民要回田地，哭丧着脸说：“皇上，你赐给我父亲的田地。你不打算要回来了吗？”
李渊不耐烦地说：“好了，好了，我再重新给你父亲赐一片田地就是了！”
这时，张婕妤才破涕为笑，但心里更加怨恨李世民了。
伊德妃的父亲伊阿鼠是个仗势欺人的地皮流氓无赖，一天，秦王府的杜如晦骑马从伊阿鼠家门前经过。伊阿鼠的六个家童把杜如晦从马上拉下，骂道：“你是什么人，从我们家门口经过，竟然不下马行礼！”
杜如晦不甘示弱地说：“经过小人门口，我从来不下马！”家童们听后，群起打了他一顿，还活生生地折断了他的一根手指头。
伊阿鼠怕李世民先告状到李渊那里，他到来了个恶人先告状，于是他怂恿女儿伊德妃在皇帝面前说：“秦王的左右欺负我家。”
李渊大怒，叫来李世民，斥责道：“我妃子的家属，你的左右都胆敢欺负，何况百姓！”
李世民辩解说：“完全是伊阿鼠不讲道理，打伤我秦王府的人！”
李渊不相信地说：“秦王府的人不惹伊阿鼠，他会随便来告状吗？”
无论李世民怎样辩解，李渊也不相信，无奈，只得忍气吞声地离去。
