李靖拱手称谢，两人又谈了一阵梁师都和东突厥的事务。这时，午时已至，李世民留李靖在府内用了饭，李靖方辞谢而去。
第二日，李世勣也来拜访，李世民在谈话中间又以言语试探，没想到李世勣也和李靖一样，躲躲闪闪并不直接回答。李世民虽然失望，依旧高兴地与他叙话，让他到杜如晦那里去取山川图，然后留饭送走。
天策府如今门前车马稀少，若有人上门很是显眼。算起来，能经常上门的人寥寥无几，高士廉算是一个经常上门之人。缘于他是长孙嘉敏的亲舅舅，又兼他官职微小，因而可以从容出入天策府，并不显眼。李世民以前与房玄龄和杜如晦所谈最多，如今他们不敢登门，李世民再有什么心里话，只好对高士廉和长孙无忌细说。这日晚间，高士廉又登府门，李世民就将李靖和李世勣来访的事情说给他们听。
高士廉思忖了一会儿，然后说道：“他们二人如今正蒙圣上宠信，且手握重兵，若能将他们召为麾下，当为大助。如此看来，他们的心意已定，就是再做努力也没有用处。可惜，可惜了。”
