有人劝郭泰出来做官，郭泰都是婉拒，人们对他说：
“听你谈论，志向高远，谋略惊人，若能做官治世，必远过常人，造福百姓，你坚辞不就，真是太可惜了。”
郭泰神情哀伤，苦声说：
“官场最重清规戒律，我的设想再多，岂能改变官场？做官自有做官的学问，这其中的诀窍是无法言传的。”
当时儒士素爱议论朝政得失，知名人士更以此招揽门生，扩大影响。因为郭泰的名望所在，许多人便想把郭泰拉入，以壮声势。对此，郭泰一律拒绝，他推托说：
“治学和从政是两回事，为何非要扯在一起呢？一个人的学问再大，也不可能面面俱到，无所不知，我实无高论啊。”
郭泰的朋友说他胆小怕事，还指责他说：
“你平日苦学深研，国家大事多有己见，不借此昭告世人，真是珍珠暗埋了。有了学问不宣传它，你到底为何呢？”
郭泰回答说：
“时下政局黑暗，宦官专权，哪里是谏言的时机呢？真言须对真人言，否则不但无用，反会徒然招祸。
后来，党锢之祸爆发，那些议论国事的知名人士多数被杀，而郭泰无把柄可抓，于是逃过大劫，没有受到丝毫伤害。
谢甄和边让都负有盛名，他们去拜访郭泰时，郭泰只是默默地听他们高谈阔论，极少插话。谢甄于是对边让说：