隔开自己与李世民。他确实是做得很巧妙，巧妙得不但李世民丝毫没有察觉他的动机，就连自己明明是知道他的用心，却也拿他毫无办法。
事实上，自从李世民身边有了这郎舅之后，柴绍就没能再像三年前在宫内当着李世民的队正时那样与之经常私下见面了。筹备起兵的期间，他在长孙无忌的“劝导”下留在长安为李世民打听都城那边的消息，因此与其他昔日同在一个小队里的队友都到了太原给李世民帮忙不同，唯有他一人独自留在长安，只能借助鱼雁往来互通音信。可是在这些以家书为名的信件之中，柴绍也只敢谈论“公事”，对李世民的嘘寒问暖也都严格地控制在姐夫对内弟的亲情之内，不能稍有逾界，因为他估计这些家书也会被长孙无忌一一仔细地过目的。
晋阳宫事变之后，李氏等于是已经公然背叛隋室，柴绍作为李家的女婿自然不能再留在长安，便与妻子分头逃亡。他在逃往太原的路上与从河东逃出来的李建成、李元吉这李家的长子、四子会合，一同抵达太原。
此后，从太原举兵到进军长安，一路上柴绍都隶属在李世民这右领军都督的麾下，然而他仍是无法与李世民能有私下相处的机会，这自然仍是因为李世民身边总是有长孙无忌寸步不离。而且，更多的时候，李世民都在长孙无忌的“劝说”下——柴绍曾亲耳听到长孙无忌就当着他的面这样对李世民说：“世民，柴姐夫是你这右军麾下罕有地能独当一面的将帅之才，你把他留在你身边做些副将、甚至是小兵那样的事情，岂不是太浪费他的才干了吗？你应该拨一些兵马给他统率，作为一支偏师派出去帮助你扫荡周边地区，那才是人尽其才之道，对吗？”听得李世民连连点头——，总是派他离开身边，在外统领一支偏师。
虽然柴绍也知道自己获派那样的职责确实对李世民是最有利的，可是他总觉得，长孙无忌这样劝说李世民的真正用心，只是要将自己与之隔得尽可能的远。但长孙无忌“阻挠”自己与李世民能就近相处的说辞又是那样的冠冕堂皇，不仅李世民完全没有觉察他这背后的“私心”，就连自己明知内情，但考虑到要为李世民做最有利的事情，也只能是按着长孙无忌的“意志”行事。面对着长孙无忌这样一次又一次类似的分隔自己与李世民的手法，柴绍感到的只是无力……与无奈！
直到五个月前，长孙无忌突然找到柴绍，毫无隐瞒地坦然相告前一天晚上李世民差点被原来早就在暗地里迷恋着这亲儿子的身体的李渊强-暴，幸好他有那么巧及时赶到，把李世民救了出来。其后当天
…。。