首先，我们要了解高翰文和海瑞的性格和为人。
是一个清高自傲的人，他不屑于与他人打交道，更不愿意为了官职而妥协自己的原则。他的思想比较陈旧，认为官员应该廉洁奉公，不受贿赂，不为私欲所动。但是，他的这种性格往往会使他在官场上吃亏，因为官场是一个充满人情世故的地方，光有原则是不够的，还需要有人际交往的能力。
而海瑞则是一个性格坚定、正直无私的人。他坚持自己的信仰和原则，不轻易妥协。他在官场上的遭遇也说明了他的性格优势。虽然他在官场上受到了很多挫折，但他依然坚守自己的信念，最终成为了一位著名的官员。
胡宗宪之所以认为高翰文不适合做官，是因为高翰文的性格过于清高自傲，难以适应官场的人情世故。他在官场上可能会因为过于坚持自己的原则而吃亏，甚至被迫辞职。而海瑞则不同，他的性格优势使他能够在官场上立足，甚至可以成为改革的力量。
因此，胡宗宪并没有说高翰文不适合做官，而是认为高翰文的性格不适合在官场上生存。相比之下，海瑞的性格更适合在官场上立足。胡宗宪的话，既指出了高翰文的不足，也肯定了海瑞的优点。这也给我们提供了一个启示：我们在为人处世时，不仅要坚持自己的原则，还需要具备一定的人际交往能力，才能在官场、职场等环境中立足。
其他因素不提了，这里面有三个核心因素，决定了胡宗宪这样做。
第一，海瑞是认清现实忠于理想的实干家，高翰文是不懂现实、空有理想的理论派。
这个非常明显，海瑞一直在基层做事，任知县前只是个学谕，但位卑未敢忘国忧，依然敢上书陈弊，才被谭纶、张居正、裕王看中，委以重任，而他见惯民间疾苦，知道政策施行在底层是怎么沦为豪强剥削百姓的利器的，所以他做事有理有法有据，能做事敢成事不怕事。
高翰文就不同了，他出身名门望族，十指不沾阳春水，读书有成做了几年翰林，擅长的是书斋高谈、庭下清议，“以改兼赈，两难自解”就是不知下情、自说自话的理想作品，而且他不知世途险恶，一个美人计就差点让他身败名裂。这样不通实务、不擅机变、不知民情的人，在当时清流、严党互相攻击的朝政下，根本没有生存空间，局势也不允许他慢慢做事、慢慢成长，因为他已经卷进了漩涡的中心。
第二，海瑞社会关系简单，兴趣简单，不容易被掣肘， 而高翰文关系复杂，个人爱好较多，太容易被压制。
海瑞幼年丧父，只有母亲、妻女这些简单的社会关系，他个人也欲望简单、清廉为政，没有什么嗜好去占用他的精力，也不会因为嗜好而被别人攻击。高翰文就不同了，他是出身大族、才华横溢、少年入仕前途可期，精通音律可谓风流才子，这样的人几乎是所有人都羡慕和向往的人生赢家。可以做好官、有政声、升品阶、成大员，但不能用这样的人去做大事！因为他的家族人脉，会拖累他改变旧制的步伐，他之前复杂的社会关系和太多的个人爱好，会被人利用和攻击，他基本上在第一轮攻击中必然倒下。
到杭州后的表现也证实了，高翰文根本不适合待在政治权力的中心，那不是他的主场。
最后也是最重要的区别则是，海瑞背后有裕王，严党只敢暗地阴他，明面上谁都动不了他，高翰文不是严党的人却被严党支持利用，他会被清流攻击而严党也会随时抛弃他。
海瑞无党，他不是清流的人，对徐阶高拱张居正谭伦等人并非没有看法，但因为是储君启用的人，没有人敢不给“未来天子”面子，只要海瑞不说打倒裕王的话，谁也不敢动裕王的人，动裕王的人就是不给裕王面子，除了嘉靖，没有人敢这样做。所以海瑞闹得再凶，只要他自己不作奸犯科，保持一身清正，再不被官场所不容，也没人敢碰这个红线。
高翰文也无党，他只是入仕后在翰林院读书，徐阶高拱张居正都在翰林院呆过，他们并没有拉拢高翰文，严嵩严世蕃就更不用说了，翰林院的书生他们没有兴趣。只是因为高翰文脑洞大开的拿出了理论文章“以改兼赈、两难自解”的方略正好符合严嵩严世蕃的思路，才被他们抓来扛到前面去当靶子和傀儡。但是正因为高翰文不是清流和严党的人，所以他必然被两派所不容，清流会攻击这不符合实际的政策，严党也随时准备让高翰文去挡子弹、堵抢眼，真出了官逼民反的事，往高翰文身上一推拉倒。
胡宗宪就是清流眼中的严党，严世蕃口中的叛徒，而胡宗宪在初见海瑞读诗明志的时候说过，他要“万里奉王事、一身无所求，也只边塞苦，岂为妻子谋”，说白了就是忠君爱国，一心-平定倭寇，用现在的话说，他是个做事的人，但是因为派系的纷争， 让胡宗宪夹在中间难做，平倭这样的军国大事也被人掣肘。
以胡宗宪之能尚且如此，高翰文这样也想做事却没能力的人，在江浙待着无疑是死路一条。所以胡宗宪才劝高翰文急流勇退。
电视剧中 抛开胡宗宪说不说，按事实讲，海瑞做官完全没问题，而高翰文完全不行。海瑞深知官场黑暗，深谙各种人情世故，但是他能做到出淤泥而不染，视钱财如粪土，并且不畏强权，直击一切问题的根源—嘉靖，海瑞是不想做贪官，而不是不适合做官。反观高翰文，就一多情才子傻白甜，不懂官场各种潜规则，更不知人心险恶，出山第一件差事，办的一塌糊涂，自己就成了贪官—贪色，这种人完全就是官场鱼肉，所以胡宗宪说他不适合做官是很准确的。
高翰文是一个理想主义的文人墨客，海瑞是一个现实主义的基层干部，所以胡宗宪说高翰文不适合当官。
高翰文出身江南书香翰墨之家，生活无忧，空有读书人的一腔热血和修身齐家治国平天下的远大抱负。进入仕途后又供职于翰林院，没有在基层锻炼过，对于社会民生的疾苦了解不深，对于基层官场政治生态了解不深，所以他提出的“以改兼赈，两难自解”纸面上是好办法，但是落实下去就不是那么回事儿，他低估了民生的艰难，官员的贪婪，所以胡宗宪说他不适合当官。
海瑞就不一样了，出身普通人家，自幼丧父，后来又以举人的身份做了小小的教喻，多年在基层工作，这些经历让他对社会民生深有了解，对官场上那些“规则”知根知底，深恶痛绝。海瑞不仅有理想，有定力，而且还能因人而异、因地制宜采取有效的斗争手段，这就和高翰文形成鲜明对比。
海瑞是一个官场斗争经验丰富的斗士，高翰文只是一个稚嫩理想主义者，所以胡宗宪才会说高翰文不适合做官。
听到广陵散就拔不动腿。玩儿心不退，或说有嗜好就有软肋，有软肋就不能“无欲则刚”，不刚又不屑人情，找死呐