正因为如此，他明知是卫觊通风报信，却不能说什么，只能装不知道。
司马懿知道裴潜会有这样的反应，并不希望裴潜知道，可是他拦不住卫觊。他是河内人，不是河东人，在这个问题上，卫觊不会相信他。形势发展到这一步，他也很无奈，接下来该怎么走，一时竟没有更好的办法，只能建议刘备暂时压下张飞的作战计划，不予回复，打算等两天再说。
但刘备很快就发现形势不容他们等待，河东世家的态度急剧变化，别说分兵取永安，就连进攻白波谷都受到了质疑。柳元首先提出，自己的部下损失太重，恐怕不能担任战事，请求调回临汾休整。刘备开始也没觉得有什么问题，便答应了，结果柳孚刚拔营返回临汾，又有几个小家族提出各种各样的请求，希望能退出战事，或就地休整，或返回临汾，皮氏的耿华甚至要求刘备增兵皮氏，以免皮氏步汾阴后尘，落入高顺之手。
刘备气急败坏，以为是卫觊从中作祟，一怒之下，说了几句难听的。
卫觊莫名其妙，他也正在追查原因，但所有人都防着他，无形中孤立了他，甚至有人看他的眼神极其不善，就像是豺狼看着猎物，让他惊惧不己，只有暗中提高警惕。卫家已经家破人亡，只剩下他和身边几个人，如果说有人想用他的首级向鲁肃邀功，他一点也不奇怪。
面对刘备的质问，卫觊心灰意冷，欲哭无泪，索性告病，不再问事。
王盖感觉到了强烈的危机。他私下与司马懿商量，河东人有了异心，大军随时有可能崩溃，必须准备后路。张飞的计划应该立即执行，抢占永安，保住撤往并州之路，若是延误了战机，永安失守，他们有可能全军覆没。
司马懿深以为然，随即向刘备进言，留下王盖正面进攻白波谷，刘备亲率部分精锐绕过白波谷，进取永安，再回师与王盖夹击白波谷。至于裴潜的意见，倒不用过于担心，裴潜不是反对他先取永安，而是怕他放弃河东，只要他不放弃河东，裴潜是不会做出过激行为的。
