张武知道李严非常有才，还是文武双全。
文的方面，李严可是制定蜀科的五人小组之一，其余四人是诸葛亮、法正、伊籍、刘巴，蜀科后来成为蜀汉的法律体系基础。
武的方面，李严任犍为太守的时候，盗贼马秦、高胜等人在郪县起兵造反，聚集了五万多人的队伍。李严不用援兵，只带着本郡五千士兵前去讨伐，斩杀了马秦和高胜，其余人都四散逃走。李严能与黄忠大战五十回合不分胜负，他的武力就算比不上黄忠，达不到超一流的水平，但至少也跟魏延差不多，一流是没问题的。
张武也知道李严有野心，想手握大权。
刘备死后，李严作为托孤大臣之一，感觉自己的权力比诸葛亮小太多，因此有些不满。他见诸葛亮当了益州牧，便要求割出五个郡来成立巴州，让他担任巴州刺史。诸葛亮当然不会答应，这不是分裂国家吗！后来李严又假意劝诸葛亮受九锡，进爵称王，实际上也是自己想更进一步。
但诸葛亮是何等人物，怎么会看不出李严的想法，看着越来越得寸进尺的李严，诸葛亮最终忍无可忍，将其废为庶人。