岳飞投奔张所之后没有多长时间，张所的河北招抚使就被撤职了，所以王彦的部队就成为了孤军，岳飞就跟着王彦到处打游击。当初，王彦就驻扎在卫州新乡石门山，就是今天的河南新乡。王彦看见金军势大，所以他比较谨慎，不太去接战，岳飞就对这件事情很不满意。那时候岳飞才24岁，是一个年轻气盛的少年将军，他当众指责王彦胆怯，说“今不速战，而更观望，岂真欲附贼耶！”意思就是你不接战，你就是要投降金军的意思嘛，对不对？那王彦没有理岳飞，结果岳飞大怒，背着王彦，率领自己的所部直接去跟金军交战。
岳飞战果辉煌，他攻占了新乡，擒了金军的千户，还杀死了金军的黑风大王。但是擅自出战是严重违反军纪的，不出王彦所料，岳飞的轻举妄动招来金军的围攻，而且祸及王彦，王彦的整军被金军打得七零八落。
王彦真的像岳飞所说的那么样胆怯，甚至是想投敌吗？岳飞和王彦的选择究竟谁对谁错？这个问题历史上也是有讨论的。根据正史记载：“金兵盛，彦不敢进，飞独引所部鏖战。”就是这个“彦不敢进”，到底是因为确实胆怯不敢接战呢，还是出于谨慎保留实力？从后来发生的事情来看呢，好像王彦并不是像岳飞指责的那样是一个胆怯不敢接战的人，因为在全军被金兵打散了之后，王彦收拾残部，而且在全军将士的脸上刺了八个大字，“赤心报国，誓杀金贼”，从此江湖人称“八字军”，成为当时非常著名的一支抗金精锐。从这些证据上看起来，可以说王彦并不是一个怯战的将军，岳飞当初是错怪他了。
在这件事情上，岳飞又一次为自己的年轻付出了代价，一时冲动，就造成这样的结果。后来岳飞听说八字军壮大了，他就单人匹马，前往王彦寨门，磕头谢罪，要求重归八字军。从这一点上讲，岳飞还是够胆量的，胸怀也大，敢作敢为，一人做事一人当。
按宋朝军队的军制，王彦是可以把岳飞杀掉的，但是他没有杀岳飞，也没有接纳岳飞，而且据史家考证，他连一点粮食都没有周济给岳飞。他让岳飞自行前往驻守开封的宗泽那里接受军法处置。
王彦对这件事情始终耿耿于怀，九年后的1136年，岳飞的官阶、声誉已经远远超过了王彦，此时王彦病重，宋高宗有意让岳飞接治八字军，但是王彦坚决不同意。在这之后不久，有一次移防，王彦要坐船顺长江往下游走，岳飞就在长江边上带着全体高级将领准备接待他，跟他共释前嫌。王彦先是答应了，但当他的船队到了武昌岳飞等待的那个码头之后，却没有靠岸，而是如箭一般随风漂流而下。实际上这是王彦对岳飞的一种羞辱，就是我不给你面子，但是岳飞并不以为然，转过身来还向自己的将领大讲八字军当年抗金的事迹。
很多人在重新评价岳飞的时候，经常拿岳飞和王彦的冲突来说事儿，但如果完整地了解到这件事情的始末，就可以看出不是岳飞格局不够大，而是王彦格局不够大。如果王彦当初在石门山接纳岳飞共同抗金，那他就是蔺相如啊。
遇到伯乐
岳飞以戴罪之身回到宗泽的东京留守司。这个东京留守司也有纪律检查委员会，人家对他所犯的罪行进行了调查。当时作出的结论是“军中非大将令，副将下辄出号令，及改易族旗军号者，斩”、“背军走者，斩”，按照这个说法的话，岳飞得死两回，所以他们就向宗泽报告，说岳飞应该处斩。
宗泽的态度和王彦的态度截然不同，他很了解岳飞是一个勇猛的年轻将领，也非常理解他，脱军出战金军是出于爱国情怀，所以他就接纳了岳飞。但是军令如山，所以还是给他处以降级的处分。
宗泽这就等于给了岳飞一个戴罪立功的机会。岳飞连续打了好几个胜仗，所以宗泽很快又把他升回了统制。但是没过几个月，岳飞居然又跟自己的恩师兼伯乐宗泽犯颜相见，打起来了。
北宋是打仗非常讲究阵法的朝代，宋太宗赵光义曾亲自带人写了一本《平戎万能全阵图》，专门教将领怎么布阵。宋仁宗赵祯在位期间也编了一个《武经总要》，他亲自画图来说明，并且教大家怎么布阵。宗泽是进士及第，是个儒将，他给了岳飞一大堆兵书，是专门研究布阵的，并对他说：“尔勇智才艺，虽古良将不能过，然好野战，非古法，今为小将，还可应付，他日为大将，非万全计也。”
宗泽这一番话是很有深意的，他的意思很明确：你是野路子，小打小闹可以，将来要遇到大阵势的话，你还真得要手头有点东西，肚子里有点东西才行啊。
岳飞却很不服。他拿到阵图，看了一段时间之后，宗泽就问他阵图看得怎么样了？他说：“所赐阵图，飞熟观之，乃定局尔。但古今不同，岂可按固定阵图，兵家之要，在于出奇，不可让敌看清，方可取胜。”大致的意思呢，就是岳飞认为，这图太死板了，我打仗的时候，如果照这个图来打，显然就会失去很多变化的机会。所以他的理论就是：“兵无定势，将无常法”，这才是为兵之道。
宗泽是河北兵马元帅府副元帅，而且他是进士出身，年近古稀，德尊望重。岳飞是农民出身，只是一个统制，屁大点的官，而且什么文凭都没有，年纪才24岁，居然对一个有心栽培自己的上司说这种话，实在是不识好歹，太不给面子了。然而，宗泽却沉默了一会儿说，“尔言是也”。意思是你说得对，有道理啊。
从这件事情上可以看出：第一，岳飞确实是大将之才，他24岁的时候对兵法就早有研究，而且有自己的看法。第二，岳飞性格率真，敢想敢说，哪怕面对自己的恩师兼伯乐，他也不稍加掩饰，人龙刚气，迎空扑面而来。
岳飞投奔宗泽不到一年，68岁的宗泽因病去世，在宗泽去世之前，他没有只言片语提到自己的家事，后事怎么安排，而是大呼三声“过河、过河、过河”。过哪一道河？过黄河;过了黄河是什么地方？是北边;北边是什么地方？是被金军占领的宋朝的沦陷区。
宗泽是一辈子对岳飞影响最大的一个伯乐，他跟岳飞相处的时间其实并不长，但是他不仅仅是从军事上影响了岳飞，也从人格上影响了岳飞。宋人对宗泽有一句非常恳切的评论，叫做“虽身不及用，尚能为我宋得一岳飞”，认为宗泽最大的贡献就是发现岳飞，并且重用岳飞。
