隋军破长安之后，便派遣李蔚、长孙安业、窦师武前往永丰仓城来劝降。
独孤怀恩慢条理地说道：“他们投降了，也未必说明唐王败了啊。”
“叔父！”
独孤大义急迫地说道：“申国公李蔚一无兵，二无权，一个闲散人员待在长安，不过一个样子货。叔父觉得，若不是长安已破，他会投降隋军吗？”
独孤怀恩也有些不耐了，便说道：“大义，你到底想说什么？”
独孤大义靠近独孤怀恩，低声言道：“叔父，到了这个时候，咱们何必再为李唐卖命？须知咱们独孤家跟李家是亲戚，可也是大隋外戚，为了李渊覆灭了家族，不值当的啊。”
独孤怀恩有些沉默。
独孤大义以为独孤怀恩是顾念与李渊的感情，因此又说道：“窦师武来，窦家降的可能性极大。这窦诞难道会为了李渊和李建成，与家族为敌？搞不好他就已经在筹谋着献城，咱们若是再等下去，等窦家投降，隋军入城，一切都晚了。”
“让我想想！”
独孤怀恩当然不是为了李渊，他跟李渊的关系没那么亲近。
独孤怀恩和李渊虽然是表兄弟，但双方年龄差了快二十岁，感情很浅，之所以参与到李渊的叛乱，也是因为天下大乱，他们为了关陇利益，不得不支持李渊。
但之后表兄弟二人的关系不仅没有因此而拉近，反而开始疏远。
当初李渊入关中，自以为天命在身，离定鼎之业已经不远。于是一时兴起，便对独孤怀恩道：“弟姑子悉有天下，次当尔邪？”表弟啊，你姑姑家的儿子都要做皇帝，接下来估计该是你的啦！
言者无心，听者有意。李渊一句无意的调侃，却让独孤怀恩有了别样心思。
“我家渠独女子富贵也？”
独孤怀恩深以为外戚，靠女子显贵为耻。
当然这只是个引子，之后独孤怀恩奉命围攻蒲坂，久攻不克，频战不利。
李渊几次催促他，甚至“诏书切责”，引得独孤代恩不满。
你行你上啊。
再之后张文远远道而来，兵进蒲坂，并以蒲坂为跳板，和潼关的屈突通二人时刻威胁着关中的安全。
李渊认为会有这个结果，俱是独孤怀恩不能攻克蒲坂所致，对独孤怀恩怨念更深。恩宠、礼遇大不如前。
独孤怀恩一个工部尚书，也是重臣，只得跟窦诞、王长谐等人一般，在李建成麾下为一部将领，便是如此。
独孤怀恩早有反义意。
但是投降黄明远，还是让独孤怀恩不满。
因为独孤怀恩的父亲独孤整，乃是独孤信的小儿子，当初就是被黄明远击败，然后让杨广和黄明远二人逼死的。
黄明远乃是他的杀父仇人。
“你七叔祖······”
“叔父，若论恨黄明远者，无如窦抗者，连窦抗都降了，独孤家又如何。天下大势，独孤家可以违逆的。”
独孤大义看了独孤怀恩一眼，意味深长地言道：“叔父，不能为了一人，而让整个独孤家都陷入灭门的危险。”