有时候许多不良因素严重妨碍建立良好人际关系，这些因素主要有：
（1） 嫉妒心理障碍。在人际交往中妨碍建立良好的人际关系的重要异常心理因素之一是嫉妒心理。由于交往双方因文化、传统、道德、修养、经济水平、社会地位、历史背景、民族、地域的不同，价值观的实现程度不同，均可以产生嫉妒。嫉妒既是一种心理现象，也是一种社会现象，更是历史久远、分布面广的一颗毒瘤。嫉妒的情感特征是具有攻击性、隐蔽性、报复性和“同归于尽”的心理。
（2） 个性倾向性障碍。个性倾向性包括人的价值心理、兴趣等。价格心理一旦形成，便对人的态度、行为起着指导、调节作用，决定着人该干什么，不该干什么。如果人的行为违背自己的价值心理，便会出现心理上的不平衡，产生负疚感和自责感。正确的价格心理有利于人际交往而不正确的价值心理会形成人际交往的心理障碍。兴趣是反映一个人行为指向特征的个性心理指标，它把人的行为引向某一事物或某一活动。兴趣窄的人容易产生人际关系的心理障碍。能力是指顺利完成某项活动必须具备的个性心理特征，分为一般能力和特殊能力。社交能力也是一种特殊能力，是由观察力、语言能力与模仿能力组成的。缺少这种能力，便会形成人际关系的心理障碍。性格表现在人的态度和行为方面较为稳定的心理特征，有热情与冷满、刚强与软弱、心胸豁达或狭窄等表现。性格是一个人举止、为人处事态度和行为特点的表现方式。
（3） 羞怯心理障碍。羞怯心理主要是一种情绪反应，往往导致大脑神经活动的暂时紊乱，使记忆发生故障，思绪出现差错，表现为语无伦次，词不达意，举止行为失当，对于人际关系的建立和发展是一大障碍。
（4） 自卑心理障碍。在人际交往中，把对方看得太高，把自己看得太低就形成了自卑心理。具有这种心理的人往往自惭形秽，怀疑自己的知识与能力，在交际中，畏缩不前。自卑心理的成因有主观和客观的原因。
（5） 代沟障碍。在人际交往中，常常可以发现年龄大的与年龄小的两代人之间的交往通常存在程度不同的心理障碍，这是由社会结构（实体结构与文化结构）方面的重大变化，导致两代人生活环境发生了改变。两代人接受的社会文化和由此产生的文化心理、价值心理、社会规范、生活方式不一样。社会变迁速度越快，外来文化传人越快，两代人之间的距离越大，人际交往的心理障碍也越大。不同年龄段的人，由于生理上的不同也会产生不同的心理特点。
（6） 自傲心理障碍。具有这种心理的人，自命不凡，自吹自擂，夸夸其谈，觉得自己了不起，别人不行，我样样行，自己认为形象好，过高估计自己的一切。这样的人，难以建立良好的人际关系，而且别人也难以接受这一交际方式。
（7） 报复心理。这是极端的自卑者为了维持心理上的平衡，掩盖自己过度的自卑，用一种近似自傲的姿态，自视高明，居高临下，藐视芸芸众生。内心对社会、对他人怀有敌意，诅咒人们对之不公平，怨命运对之太无情，憎恨地位比他高的人，以一种高高在上、嫉世愤俗的态度拒人于门外，以防别人窥透他们的内心世界，对社会怀有深深的敌意并以此来看待社会和人。这是人际交往中的一大敌人。
（8） 自私心理。具有自私心理的人，以纯粹的功利思想来衡量人际交往，建立人际关系。他们认为人际交往，只是一种价值上的利用关系而已，是满足个人私欲的一个手段罢了。为此，可以不择手段，扭曲了人际关系。这不利于建立符合社会发展和人们生理、心理需要的人际关系。
（9） 猜疑心理。具有猜疑心理的人总是怀疑他人，对一切人怀有戒备心理，不肯、不敢讲真话，戴着一副假面具与人交往。在这种心理的驱动下，他会变得越来越虚假、虚伪，变得无亲无友，很孤独。作为一个心理健康的人，应积极清除猜疑心理，建立良好的人际关系。