因为许攸曾经与人合谋干过一件，连袁氏兄弟都不敢想、也不敢干的大事：

废立皇帝！

当时是冀州刺史王芬、南阳许攸、沛国周旌等连结豪杰，谋废灵帝。

你说这许攸的胆子大不大？

当时许攸的具体策划是，趁灵帝北巡时，以防黑山贼为由起事。

没想到当时的汉灵帝得到密报后，召冀州刺史王芬入朝，王芬担忧事情泄露，选择了自尽，许攸等人则四散逃亡（太史上言“当有阴谋，不宜北行”，帝乃止。敕芬罢兵，俄而徵之。芬惧，自杀）。

后来袁绍从洛阳出逃后，许攸也跟随袁绍一起逃亡，成为了其帐下的谋士（初，绍去董卓出奔，与许攸及逢纪俱诣冀州）。

论起逢纪的地位则更高，他曾经是大将军何进的心腹（智谋之士逄纪、何颙、荀攸等，与同腹心），何进被宦官诛杀后，逢纪也投靠了袁绍，与淳于琼、许攸同到冀州。

所以说，许攸、逄纪、淳于琼是最早一批跟随袁绍的人！

辛评、辛毗、荀谌、郭图则是第二批加入的袁绍集团。

最后加入的是田丰、沮授、审配等冀州本土派。