徐世绩率部进抵黄芦岭下，於南侧谷地中择险要处立下营寨。
但见四周群山如黛，层峦叠嶂，唯有一条离石水的支流自北而下，劈开山脉，形成一条狭窄的通道。汉军大营便扎在这河谷南端的开阔处。而黄芦关雄踞在河谷的东侧，西倚绝壁，东临湍流，当真是一夫当关，万夫莫开。关墙高耸，借山势而建，唐军旗帜在关上猎猎作响。
“真乃天险……”徐世绩身侧，长史邴元真轻声说道，语气中带着惊叹。
徐世绩没有回头，只应了一声：“天险亦是人守。守将若是无用，不足恃也。”
“此关守将张平高，闻本隋太原鹰扬府校尉，系从李渊作乱之故旧。大郎以为，此将有用无用？”邴元真带着点讨好，顺着徐世绩的话，开玩笑似地问道。
徐世绩望了黄芦关多时，未有多言，只淡淡说道；“有用没用，攻上两天就知道了！”
翌日，战鼓擂响，汉军攻打此关的战事打响。
关前地势逼仄，大军无法展开。徐世绩只能派出数百精锐，在盾牌的防护、弓弩的掩护下前进。关墙上，张平高身披明光铠，按剑而立，居高临下地注视着推进至关前近处的汉军。
“放！”
随着他一声令下，关墙上箭如飞蝗，夹杂着巨大的擂石和滚木，轰隆隆倾泻而下。汉军士卒举着盾牌，在谷道上艰难前行。弩矢穿透盾牌，带出血花；滚石碾过人群，留下残肢断臂。惨叫声、金铁交击声、巨石滚落声在山谷间回荡，不绝於两军将士之耳。
一整天的血战，汉军付出了百十的伤亡，才只勉强清除掉了关前设置的鹿角、陷坑等障碍。
……
李神通在关头观战了一日，暮色至时，望着退却的汉军，他抚摸胡须，露出轻蔑之色，对身旁的司马柳崇礼说道：“司马，徐世绩果如俺料，幸进之徒罢了。你看他用兵何其呆板？如此天险，岂凭一股血气之勇所能撼动？贼情种种，於今观之，皆在本王度内矣！”
柳崇礼附和说道：“大王以宗室肺腑之亲，为国家名将，当然不是徐世绩黄口小儿可比。贼军锐气已挫，只要我军稳守关隘，待其师老兵疲，必可不战而胜。”
入夜后，李神通又接报，陈敬儿、王行本部也已兵临高唐关并开始攻击，但同样进展甚微。
……
接连三日，徐世绩挥军猛攻，攻势一次猛过一次。
有时他甚至亲自督阵，引得关上箭矢集中向他所在的方向覆盖，幸得亲兵举盾死死护住。然而，血肉之躯终究难逾险关。关墙下，汉军伤亡渐多，血迹将山石和泥土染成了暗褐色。
攻到第三日午后，汉军的攻势明显转疲。
就在这天傍晚，又接到了窦轨转送来的高唐镇守军的军报。陈敬儿、王行本部亦连攻数日，毫无寸进，伤亡不小。李神通将这份军报看了几遍，即令召张平高、柳崇礼来见。
张平高到时，柳崇礼已在室中。
李神通以手抚案，眼中闪烁着兴奋的光芒，说道：“陈敬儿、王行本亦如本王所料，对我高唐镇的进犯，连日唯损兵折将，无有寸功。陈敬儿诸贼且先不言，只说攻我黄芦此关的徐世绩诸部汉贼。彼辈苦战三日，本王今日在关头观得清楚，已成强弩之末，气衰力竭矣！
“我守军若此时出关猛击，必可大破之，擒杀徐世绩，立不世之功！”他转顾张、柳两人，说道，“本王心意已决，决定明日便择精锐，抄山侧小道，夹击徐世绩诸贼！二君何意？”
柳崇礼迟疑了下，却未有再便附和，略露难色，拱手劝道：“大王，出关进击之策，前日已快马报与元帅，然至今未有回令。元帅心意，我等不知。若……，若元帅不允，我等贸然出击，岂非违令而行？此干系重大，还望大王三思。”
李神通转看向张平高：“张将军，你以为如何？”
张平高沉吟片刻，他是前线指挥官，对战场的变化感受更为直接，就说道：“回大王，末将连日观察，汉贼攻势确已渐钝，士卒面露疲态。且据刘三儿禀报，他遵照大王之令，联络南边山中的诸胡部落，频繁袭扰汉贼粮道，颇有所获，焚毁粮车数十辆。
“贼军后路不宁，粮秣艰难，军心必然浮动。若单从战机而论，此时趁其久攻不下、士气低落、军心动摇之时，出关进击，确是良机。”他话锋一转，也提到与柳崇礼相同的顾虑，“只是，元帅军令未至，是否再等一等？待元帅钧令抵达，再行定夺更为稳妥？”
李神通站起身，叉着腰，在堂内踱了几步。
他内心交战，一方面是诱人的战功，另一方面是军纪的约束。
最终，求胜的欲望和身为宗王的矜持占据了上风。他猛地停下脚步，决断说道：“良机已至，岂能坐失？不闻‘将在外，君命有所不受’乎？且何况秦王军令！何况秦王远在静乐，焉知此处瞬息万变之敌情？本王意已决！今夜再修书与世民，陈明此间情势之紧迫。然后，明日我等再观一日，若贼势果衰，后日清晨，便开关进击！一切干系，由本王一力承担！”
张、柳二人见李神通神色坚决，且愿承担责任，不敢再强劝，只得领命。
然而，就在李神通刚写好给李世民的书信，准备明日派人送去静乐时。
夜深时分，窦轨派遣的快马携李世民的回令抵达了黄芦关。
李神通被从吏唤醒，他披衣而起，就着烛光，打开了李世民的回令。
系李世民亲自所书，李世民熟悉的笔迹跃然纸上，用笔雄健，语气却充满冷静和告诫：“……李善道起於草莽，而能席卷两河、山东，岂徒幸致？其人善任能，观其所用，或瓦岗旧贼，或降将之才，皆非庸碌。徐世绩既为善道信重，委以方面之任，必有过人之处，未可轻也。公等但当谨守关隘，护离石不失，无得轻易出战！切切此令！”
览毕，李神通如同被一盆冷水当头浇下，满腔热情化为乌有。他捏着军令，坐回床榻，却虽心有不甘，可李世民是元帅，不得不从其令，只得暂且按下急於求胜之心。
……
次日，汉军继续攻关。
一连又攻了数日，而始终无有战果，就连攀上关头也只有一次，旋即就被打退。
乃於这日，汉军一改前些日的猛攻，没有再发动像样的进攻，只遣少数兵马，鼓噪着又攻了两三阵，便收兵还营。旋即，又遣出民夫数百，收拾前几日遗落关前的兵器和一些没有搬走的汉卒尸体。李神通闻报，急登关头，仔细望着这一幕，心思转动，却起惊喜之疑。
莫不是汉军见久攻此关不下，粮道被扰，不得安宁，生了撤兵之意？
在城头上又观望了一日。是日夜间，李神通再又接到关於高唐镇方向的陈敬儿、王行本部汉军情报：陈、王两部汉军已从高唐撤兵，南下而还。
李神通不复再有猜疑，心中那团本已被李世民军令压下的火焰，又“腾”地燃烧起来，而且比之前更加炽烈，赶紧又将张平高、柳崇礼叫来，晃着高唐镇的军报，与他两人说道：“陈敬儿、王行本两部汉贼已从高唐南撤！今日本王察徐世绩部汉贼，亦有撤兵之意。若本王料之不差，徐世绩必是也欲南撤了。二公，此真天赐之良机也！我等不可再有疑虑！”
张平高问道：“大王的意思是？”
“趁其撤兵，我大举进击，必可获胜！此一战机，绝不可放过！”
张平高犹豫说道：“可是元帅军令？”
“秦王远在数百里外，焉知贼军疲、仓皇欲遁之况？若我等竟因军令，而坐视贼走，岂非贻误？今贼势已动，我以逸待劳，正可乘其撤营混乱之际，出关奋击，一战破之！纵有责罚，亦当以国事为重，胜后自能陈情，况战而得胜，何过之有？”李神通雄慨地说道。
柳崇礼说道：“大王，是不是再上报元帅……？”
“不必多言！”李神通断然挥手打断，“再报世民，往返费时，而汉贼或明日即撤，我等岂能坐视战机溜走？出击此议，就此定下！违令之罪，本王一力承担！无须再议。”紧接着，他便下令，“张将军，你今晚便收拾精卒，待以进战。且明日再观汉贼动向，若果撤退，便按俺此前之策，使俺军精卒，抄险峻山壁，潜至贼军侧翼，击其腰肋，你引精卒出关夹击！”
李神通是李渊的从弟，地位尊贵，且观察汉军动向，张平高也认为如果徐世绩部汉军撤退，确是克胜良机，便抱拳领命：“末将遵令！”
……
第二天，天未亮，关外汉军营地传来的动静，就惊动了关墙上的守卒。
得了守卒飞报，张平高、李神通、柳崇礼等赶来关头。
诸人遥遥望之，汉营中灯火通明，约略得见纷乱迹象。等到蒙蒙亮时，李神通张望得清楚，望见汉营的辎重车正在集结，部分营帐也开始拆除，俨然是一副准备退兵的模样。
“贼将撤遁，潘焕、刘三儿，还不速引精卒攀援小径，更待何时！”李神通厉声喝令。