杜易简，九岁就能文，很有才华的，为岑文本器重。后来任殿中侍御史，在路上遇到李敬玄不避，这也不算什么的，比起他那个堂弟，杜易简已经很谦虚了，然后李敬玄不满，召为考功员外郎屈之。这时裴行俭与李敬玄同掌吏部，与赏识无关，文章写得好不代表官做得好的，纯是对付李敬玄的，于是将此事翻出来言李敬玄罪，李敬玄只说了一句：“襄阳儿轻薄乃尔。”又奏易简险躁，李治怒，贬为开州司马。然后消失了……
因此现在官场上许多官员都沾了李敬玄的恩惠提拨上来的。
这是其一，李敬玄前后三娶，皆山东名门，与李家合族，他自己居于中台要职，为了示恩，多提拨了一些士族子弟为官，以朝恩树私恩。这又是李治不快活的。
在与太子争权过程中，李敬玄多次相助儿子，又让李治十分不满。
这是李敬玄的缺点，可在职时却是兢兢业业，对朝廷有很多贡献，不能因为不快就无故地将他贬职。再说，李敬玄在朝堂上的力量也不小，没有合适的理由贬职，会引起很大的争议。李治一直在容忍。
而刘仁轨这封信，正好给了李治机会。
后来许多人不明白了，兵者，军国大事，为什么李治会让李敬玄领兵，再不满，也不能拿十几万唐军性命陪葬！只是一个大臣，李治再考虑什么朝争，权谋，也不可能搭上十几万军队的。整个唐朝能有多少军队？薛仁贵大非川之败，已经让唐朝吃不消了，还没有消停，李治能昏到这地步？
其实理由很简单，如裴行俭所说，君王不懂军事，那么只能胡来了，前期有李绩在世，调兵遣将不会出漏子，李绩一死，薛仁贵一个农民没有威望，刘仁轨有威望，资历还浅，裴行俭只是稍稍展露了一下，文臣，依然不大信。所以李治只能瞎指挥，就象后来宋朝用文臣为帅，用太监为帅一样。将李敬玄调出去，与权谋有关，调出后会有什么结果，李治对军事不懂，想不出来，这才是李治让李敬玄为帅的缘由。
再说，刘仁轨说李敬玄行，想来不差的，