可朝廷里并非所有人都对刘渊有好感，侍中孔恂就反驳说，刘渊不是没有才能，而是才能太大，不管怎么说他毕竟是异族人，如果皇上给了他军队和权力，到时候平定了吴国，他万一割据江东不回来了怎么办呢？晋武帝一听，不再说话，这事就黄了。
卷二 灭晋（1）单于天降（下）
其实孔恂的担心不是没有道理，当时晋朝边疆屡有少数民族叛乱。远的不说，近在眼前就有匈奴右贤王刘猛之乱。过了几年，鲜卑秃发树机能又在凉州反了。晋武帝准备选将平叛，刘渊的一位朋友李憙（音喜）又推举他。结果还是上面那位孔恂言道：“蛟龙得云雨，非复池中物。刘渊若是平定凉州、斩了秃发树机能，那才是真正的祸患呐！”结果刘渊的事又没成。