这件事记载在《典略》一书中，虽然裴松之对此表示过怀疑，主要是唐小姐的年龄和荀年龄不太相符，但这件事不会完全没影，可能不是唐衡的女儿，是其他宦官的女儿，总之这成了荀的一个污点。荀跟曹操一样，因为家族或家室与名声极差的宦官有关而承受有言与无言的诟病。
在袁绍那里，荀虽然受着上宾之礼的款待，但在颍川郡士人整体受抑制和排挤的情况下，远大的抱负无从施展，敏感的内心还要承受他人的暗中讥讽，对于出身名门、少年时代即为大名士何称誉的荀来说，留在邺县一天，就会痛苦一天。
荀后来也被举为孝廉，参加工作，担任守宫令一职，这是个较低级的职务，属九卿之一的少府寺，掌管皇宫所用纸笔、墨、封泥等办公用具。荀在宫中供职的时间是永汉元年，即189年，这是献帝刘协的第一个年号，只用了四个月，所以习惯上还把这一年称为中平六年。
不管怎么样说，曹操得到荀格外高兴。正在事业上升期的曹操对人才十分渴求，尤其是能出谋划策的人，目前在他跟前基本上没有。
曹操更深知荀的潜在价值。荀家是颖川郡大族，有相当的影响力。曹操说过一句名言：“汝颖固多奇士也。”“汝颖”即汝南郡和颖川郡，东汉末年，在这两个地方诞生了一大批风云人物。有数字统计，在东汉一百八十年中，担任过三公、有名可记的共二百二十六人次，其中出自汝颍二郡的有三十三人次，是各郡国平均水平的七倍以上99ｌiｂ•nｅｔ。朝廷里一度曾有“汝半朝”的说法，即说半朝的官员都来自汝南郡，这固然有点夸张，但足以反映汝颖二郡人物之盛。
郭嘉字奉孝，生于170年，小荀七岁，此时二十二岁左右，他也是颖川郡人，跟韩馥同一个县。与荀不同，他出身寒门，从小就有远大的志向（少有远量），后来喜欢暗中交结有识之士，可能就包括荀、辛评、郭图等人。郭嘉此时也在袁绍这里，通过一段时间的观察，他对袁绍的评价更差。他对老乡辛评、郭图说：“明智的人应该认真辨别领导（智者审于量主），袁绍只是效仿周公那样礼贤下士的做法，但却没有领会用人的实质，他生性多疑寡断，好谋无决，想跟着他打天下、定霸王之业，简直太难了。”
张子房就是西汉开国功臣张良，后来有人常常拿这句话攻击曹操，说他早就有野心，因为如果荀是张良，曹操就自视为刘邦了。
郭嘉劝辛评、郭图离开袁绍另寻明主。辛评和郭图不太同意这样做，他们认为袁氏的恩德和威风布于天下，现在人们都来归顺，力量越来越强，放着这么有前途的地方，为什么还要离开？郭嘉知道他们听不进去，不再多说，就自己离开，找了个地方闲居起来了。
荀字文若，生于163年，此时二十九岁，小曹操八岁。小的时候，荀就显露出相当的才华，袁绍的坚定支持者、“奔走之友”骨干成员何见到他，很是惊讶（异之），说：“这是能辅佐君王成就大业的９9lｉb.ｎｅt人才呀（此王佐才也）。”何看人很毒，曹操还是刚参加工作的小青年时，他就看出曹操日后能成大事。在荀更小的时候，他看出此人日后能力不凡，关于这两个人，何都说对了。
但派系斗争对政权稳固的伤害更大，韩馥手下能人众多，但战斗力不强，缺乏凝聚力，韩馥本人也没有足够的威望，这些原因造成了他最后的失败。
袁绍夺权之后，沮授、田丰、审配等本地人争先恐后到城门口迎接袁绍进城，袁绍一改韩馥的做法，开始重用冀州人士，用冀州人把颖川郡人压下去。但他也留了一手，他也要搞平衡，用的是汝南郡人，那是他的老乡。
但荀对自己在这里的前景并不看好：一来袁绍此时帐下已是精英汇集，发展空间有限；二来袁绍反韩馥之道对颖川郡人予以压制，颍川郡士人的处境十分微妙；三来袁绍明里暗里纵容文臣武将争斗，弄得文武失合，说明袁绍虽有盛名，却很难有更大成就。
袁绍夺了韩馥的位子，对荀谌、辛评、郭图等人表面上不错，但颖川郡人已不像原来韩馥在位时那样吃香了。这个时候的荀，还是一个默默无闻的青年，并没有引起袁绍的特别关注。由于有弟弟荀谌的关系，加上颍川郡荀氏的知名度，袁绍对他还算礼遇（待以上宾之礼）。
荀的到来，让曹操十分高兴，因为他虽然怀着一颗渴求人才的心看待盛产名士的汝颖，但与他们没有太多的交往。曹操早年曾与袁绍、何等人过从甚密，但他在这九-九-藏-书-网个领域显然不具备号召力。荀的到来，真的是恰逢其时。
韩馥是颖川郡人，在他当权期间，很重视人才引进，曾派人到老家招聘名士，荀谌、辛评、辛毗、郭图等人大概就是那个时候来到冀州的。韩馥的策略是用颖川郡人压制冀州本地人，这恐怕也是韩馥跟下属关系搞不好的原因之一。
曹操阵营里团结工作做的相对较好，袁绍、刘表、刘璋、刘备乃至孙权都做不到这一点，一来出于曹操的个人权威和领导魅力，对属下产生了凝聚力，二来是曹操在人事安排上更讲求公平，反对拉帮结派。
有一种错误的观点认为，当领导的要坐稳位子，不能让下属太团结，要设法让他们斗起来。韩馥可能就有这样的潜意识，作为一个外地人，他最担心的就是压不住本土势力，所以他有意制造出派系斗争，以此平衡各种势力。
大概是这一年的冬天，在黄河北岸的东武阳，三十七岁的曹操与专程来投奔自己的二十九岁的荀第一次相见，二人做了一次长谈，谈完之后曹操激动异常，他拉着荀的手久久不放，感慨地说了一句话：“你就是我的张子房呀！”
袁绍对手下人派系斗争情况很清楚，但他只当没看见，有时候还会来点小权术，让他们斗得更厉害。由于袁绍默允和纵容各派争斗，以后在他的阵营里，逢纪与沮授不合，审配与许攸交恶，郭图一直想找机会置张于死地，重要的文臣武将都陷入内斗之中，为袁绍日后的失败埋下了伏笔。
荀谌的哥哥就是被何称为有九_九_藏_书_网
“王佐之才”的荀。受荀谌的影响，荀也来投靠老乡韩馥，刚到冀州，正好赶上韩馥下台、袁绍上台。
荀谌当初应韩馥之邀来到冀州，开始挺受重视，袁绍势力起来之后，荀谌一看不妙，主动抛弃老乡韩馥，投靠了袁绍，为袁绍取得冀州立下了大功。袁绍掌权后，重用沮授等冀州人和汝南郡人，颖川郡人有些失势，荀谌无可奈何。
荀的心境与此时另一个年轻人很相似，这个人就是郭嘉。
到了后期，曹操在选接班人问题上出现了犹豫，给喜欢拉帮结派的人以可乘之机，内部出现了两大派，严重削弱了曹魏的实力。这从反面说明，一个组织出现内斗，对谁都不会是件好事。
更让曹操激动的是，他不仅得到了一个荀，也不仅跟一个荀氏家族建立了联系，通过荀这座桥梁，他与整个颍川郡士人都建立了联系。在以后的岁月里，在荀的介绍下，戏志才、郭嘉、荀攸、钟繇、陈群、辛毗、赵俨、杜袭、应、繁钦、邯郸淳、和洽、孟建、石韬、郭诞、袁忠等一大批颍川郡士人都聚集到曹操阵营里，成为“武有谯沛、文有颍川”的人才格局。
荀没有去上任，而是回到了颖川郡，他的老家在颖阴县。一到家，他就告诉父老乡亲说：“颍川是四战之地，现在天下有变，这里必遭劫难，应该尽快离开，不要久留。”但故土难离，大家心里都很犹豫。这时候，韩馥的招聘团来颖川招募人才，应聘的人不多（莫有随者），荀带着家里人到了冀州。后来，董卓的军队果然侵犯到颖川郡www.99lib.net、陈留郡等地，留在家乡没有走的人很多都被杀了。
袁绍也学韩馥的做法，派人到老家汝南郡搞人才招聘。冀州人很郁闷，原来的领导重用老乡压他们，好不容易下台了，换上来的领导继续这样搞。汝南郡人、颖川郡人、冀州本地人在袁绍阵营里成为三大派。
从这个角度反观曹操用人则明显高出一个层次，曹操不拘一格用人已为大家所熟知，他用人还有一个特点：反对派系斗争。作为一个有事业心的领导，如果看到手下派系斗争很严重却任由其发展，最终受伤害的一定是自己。
郭嘉离开前有没有跟荀商量不得而知。不过荀跟郭嘉关系很好，以后正是在荀的力谏下，郭嘉才重新出山，成就英名。郭嘉的出走，对荀深有触动，初平二年（191年）的一天，他终于也决定离开袁绍。
还有一个原因对荀来说挺重要，但却无法说出口，这与荀的家事有关。荀的正妻是大宦官、灵帝时“五侯”之一中常侍唐衡的女儿，那时权势如日中天的唐衡一心结交士林，想把女儿嫁给汝南郡人傅公明，但被傅公明拒绝。在唐衡极度难堪之时，荀的父亲、“荀氏八龙”之一的荀绲主动请求把唐小姐娶过来与儿子荀成亲，此事影响很不好（或为论者所讥）。
袁术围攻南北宫、大杀宦官的时候，没准荀就在场，但他躲过了这一劫。董卓把控朝廷后，荀的叔父荀爽由布衣百姓直接担任了三公。在荀爽的帮助下，荀得到一个亢父县令的职务。这个地方在哪里荀并不想知道，因为他的目的只是逃离洛阳。