四月底，赵子良返回漠北抵达镇北城两天后召开将校官吏会议，正在开会时，负责喂鹰的扈从给他送来一张小纸条，纸条上写着从长安传来一个的消息：陇右节度使皇甫惟明被李林甫设计诬陷，皇帝下旨撤去他陇右节度使的职务，并把他贬为播川太守。
原来自从皇甫惟明回朝献俘之后得知李林甫在朝中专权、闭塞言路、排除异己、陷害忠良，就劝玄宗******林甫，并且认为刑部尚书韦坚有宰相之才，可以启用。岂知他说这话的时候，玄宗身边有不少內侍和宫女，而李林甫在宫中经营多年，到处都是他的耳目，尽管被赵子良打击过一次，但他很快又在宫中布满眼线，皇甫惟明劝说玄宗******林甫的话很快就传到了李林甫的耳朵里，李林甫大怒，立即命令手下收集皇甫惟明的证据。
皇甫惟明也是缺乏政治头脑，身为一个边将怎么参合朝中宰相的任免呢？再说宰相的职位可比一个边将高得多，无论怎么说，他都没有资格说李林甫不合适，更不应该说韦坚有宰相之才，可以启用之类的话，而且韦坚是太子的内兄，他又是东宫太子府出身，就算是为了避嫌，也不应当在皇帝面前说这种话，这就让玄宗很反感了。
一方面玄宗认为他举荐自己人做宰相不合适，另一方面玄宗认为他有些恃宠而骄，否则一个边将怎么会参合朝中宰相的任免之事？
也合该皇甫惟明倒霉，他在京城与韦坚相约于城外游玩，恰好被李林甫手下的爪牙吉温看见了，吉温认为这是一个好机会，当即禀报李林甫，李林甫何等样人，政治敏感性极高，他早就发现玄宗对皇甫惟明的恃宠而骄有些不满，当即在朝堂上唆使言官弹劾韦坚与边将私会，欲谋废立之事。
玄宗最在乎他的统治地位，绝不容忍有人背着他谋划废立之事，当几个言官弹劾韦坚与边将私会、欲谋废立之事时，玄宗雷霆震怒，当堂下旨逮捕了韦坚和皇甫惟明，把他们下狱。
当这两人被关进天牢之后，李林甫又让好些依附他的朝中大臣们出来作证，这让玄宗惊